Max Home IndustryЭто AI или UI? Идея достаточно проста — обучить нейронную сеть распознавать то, что вы видите, только по активности своего мозга. Это вообще возможно?
Короткий ответ — да. Однако важно с самого начала понять, что это не подключение к данным ЭЭГ, то есть не получение электрических импульсов от черепа и не определение того, о чем вы думаете. Давно утверждалось, что ЭЭГ — очень грубый инструмент для определения того, что делает мозг.
В этом исследовании, проведенном учеными из Киотского университета, используются данные функциональной МРТ, которая показывает активность каждой области мозга. В частности, активность зрительной коры передается в нейронную сеть, которая затем обучается производить выходной сигнал, соответствующий визуальному входу, который видит субъект.
Это кажется маловероятным, но это работает. Вы не получите точного воспроизведения изображения, но оно достаточно близко, чтобы увидеть связь.
Что еще более примечательно, так это то, что он работает с сгенерированными формами, которые не были частью обучающего набора, который состоял только из естественных изображений. Это убедительно свидетельствует о том, что нейронная сеть изучила структуру зрительной коры таким образом, чтобы копировать взаимосвязь между входным визуальным сигналом и активацией различных областей.
Добавление другой нейронной сети, чтобы ограничить вывод первой сети, чтобы он был ближе к естественным изображениям, улучшает результаты.
Удивительно, что это работает так же хорошо, как и работает, и есть много возможностей для улучшения и добавления дополнительных данных во входные данные.
Для чего вы могли бы это использовать?
Как утверждают исследователи:
Мы представили новый подход к воссозданию перцептивного и ментального содержания на основе активности человеческого мозга, сочетая визуальные характеристики из нескольких слоев DNN. Мы успешно реконструировали просматриваемые естественные изображения, особенно в сочетании с DGN. Реконструкция искусственных форм также прошла успешно, хотя использованные модели реконструкции обучались только на естественных изображениях. Тот же метод был применен к изображениям, чтобы выявить элементарные реконструкции ментального содержания. Наш подход может предоставить уникальное окно в наш внутренний мир, преобразовывая активность мозга в изображения с помощью иерархических визуальных функций.
Да, его можно использовать как совершенно особый компьютерный интерфейс, но его также можно использовать для чтения мыслей испытуемого, во многом подобно ситуациям и методам, предполагаемым в научно-фантастических рассказах.
Ясно одно: это доказывает, что сканирование фМРТ содержит много информации — больше, чем вы могли ожидать.