Университетът в Осака е разработил невронна мрежа, способна да реконструира

Университетът в Осака е създал невронна мрежа, способна да реконструира облика, който човек гледа сега. Анализирайки данни от функционален ядрено-магнитен резонанс, системата точно възпроизвежда освен формата, само че и цветовете на обектите. Учените приказват за първата в света машина за четене на мисли.
Обхватът на приложенията на обещаващата технология на компютърното зрение е доста необятен: от другарство с парализирани хора до записване на сънища и проучване на метода, по който другите животни възприемат света към себе си.
Японски откриватели са се възползвали от преимуществата на Stable Diffusion - известна стратегия за превръщане на текст в тирада. Тази невронна мрежа с отворен код е сходна по конструкция на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.
Тя се основава на дифузия - способ за машинно образование, при който образният облик се генерира посредством поредни доближения. Всяка нова итерация се базира на друга текстова имитация.
Японците са комбинирали образна и семантична информация. Дифузионният логаритъм е сравнявал следените модели на невронна интензивност, образувани при разглеждане на фотоси, с моделите в набора от данни за образование. Сигналите от " образната " кортикална област са били употребявани за създаване на общ размер и вероятност. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, наподобяваща повече на разстройване на телевизионния екран, последователно придобила очертанията на разпознаваеми обекти.
Учените получиха към хиляда изображения, които съответстваха със смисъла и наличието на оригинала с акуратност до 80%. В множеството случаи изкуственият разсъдък даже пресъздава цветовата скица на истинското изображение.