Нейросеть воссоздала видео по сигналам мозга мышей

Британские ученые научили искусственный интеллект восстанавливать видео, которое смотрели мыши, по активности их нейронов. Исследователи из Великобритании применили метод микроскопической визуализации для отслеживания уровня кальция в клетках зрительной коры грызунов. Это позволило фиксировать возбуждение каждого отдельного нейрона. Об этом рассказывает TechInsider.

Для анализа данных адаптировали динамическую нейросетевую модель. Алгоритм учитывал не только видеоряд, но и движения мышей, а также изменения диаметра их зрачков. Сопоставляя реальную активность нейронов с прогнозируемой, ИИ начинал с пустого экрана и постепенно, пиксель за пикселем, корректировал изображение.

В результате система научилась генерировать высококачественное десятисекундное видео, основываясь исключительно на сигналах мозга. Точность реконструкции зависела от количества задействованных нейронов. Сравнение оригинальных кадров и полученного результата показало минимальные временные задержки и высокую степень соответствия.

Теперь исследователи планируют использовать технологию для изучения различий между объективной реальностью и ее восприятием живым организмом. Ведущий автор работы доктор Джоэль Бауэр отметил: «В наших головах нет идеального представления о мире. Процесс обработки визуальной информации искажает наше восприятие. Это отклонение — не ошибка, а особенность». Работа опубликована в журнале eLife.