ТБИЛИСИ, 9мар — Sputnik. Японские исследователи разработали нейросеть, которая с помощью магнитно-резонансной томографии (МРТ) считывает и реконструирует изображения предметов, на которые человек смотрит, краткая версия исследования опубликована в архиве bioRxiv.org.
Разработанная Киотским университетом нейросеть работает благодаря методам глубокого обучения. Для этого учеными проводился эксперимент, в ходе которого разным людям демонстрировали изображения. Всего их было 1200, и каждую картинку добровольцы видели по пять раз. А сканер МРТ создавал пары "изображение-активность (мозга)".
В результате после обучения компьютер мог воссоздавать примерные изображения того, что видит перед собой человек. В частности, людям показывали фотографии, на которых были геометрические фигуры, буквы, животные, растения и различные предметы, начиная от чашки и заканчивая самолетом.
Хоть полученные от нейросети изображения оказались абстрактными, совпадение различных элементов и схожесть с оригиналом явно наблюдалась. Это подтверждает и дополнительный эксперимент, в котором людям давали разное количество оригинальных и воссозданных изображений, а те с точностью 99,1% верно сопоставляли пары.
Ученые планируют и дальше работать над развитием нейросети, так как хорошие результаты были только в случае с геометрическими фигурами и буквами. Хоть компьютер и научился обобщать информацию и выделять значимые элементы, воссозданные изображения реальных предметов пока не отличаются качеством.
