ИИ воссоздаёт изображения из сканов мозга с высокой точностью

Исследователи из Института Вейцмана разработали ИИ-декодер, который предсказывает, что видит человек, по данным фМРТ, и генерирует изображение через диффузионную модель. Для обучения использовали сканы восьми человек с разрешением до 1 мм³ нейронов; модель-энкодер синтезирует дополнительные данные.

• Декодер предсказывает структуру и содержание изображения по сканам мозга
• Обучение шло на данных восьми человек и тысячах показанных изображений
• Энкодер генерирует синтетические сканы для дообучения декодера
• Технология требует дорогих фМРТ, но может дойти до носимых ЭЭГ