Ученые создали инструмент с искусственным интеллектом, который может «читать» мысли и представлять их как текст. Основа технологии — две модели ИИ: одна обрабатывает электрические сигналы мозга, а другая переводит их в слова. Прибор пока еще не завершен, но его точность впечатляет для прототипа — более 60 %.
В процессе мышления, движения или сна в головном мозге постоянно возникают электрические импульсы от активности нейронов. Благодаря современным технологиям чтения мозга эти сигналы стали поддаваться чтению с высокой степенью точности.
Передовые технологии применяют некоторые нейротехнологические стартапы, например Neuralink, чтобы помочь парализованным людям общаться или управлять устройствами мыслью.
Однако устройство Neuralink таит ряд рисков: для считывания сигналов требуется хирургическое вмешательство по имплантации электродов в ткани мозга.
В последнее время учёные создали бесинвазивную систему, исключающую необходимость операции. Отделение искусственного интеллекта, ориентированного на человека (GrapheneX-UTS) при Сиднейском технологическом университете разработало устройство для перевода мыслей в текст. Его представили на конференции NeurIPS, посвящённой достижениям в области искусственного интеллекта, в Луизиане.
Две модели ИИ для чтения ваших мыслей…
Для создания нового устройства команда провела эксперимент с 29 участниками, попросив их прочитать отрывки текста. Во время чтения на них надевали оборудование, регистрирующее электрическую активность мозга. Активность измерялась при помощи электроэнцефалограммы (ЭЭГ). ЭЭГ использует датчики на коже головы для регистрации сигналов от мозга. Записанные ЭЭГ-сигналы передавались в модель искусственного интеллекта под названием DeWave.
В процессе обучения DeWave воспринимал большое количество сигналов, каждому из которых соответствовали конкретные слова или фразы.
После того как DeWave научился понимать сигналы мозга, его подключили к открытой модели большого языка (LLM). Модель LLM выступает в роли «мозгового писателя», формулируя связные предложения на основе информации от первой модели. LLM не только генерирует слова на основе сигналов мозга, но и строит полноценные предложения, учитывая контекст и языковую структуру.
Точность до 60 %
Вначале точность системы составляла примерно 40%: при переводе мыслей в текст около 40 % сгенерированных слов или предложений совпадали с мыслями (текстом) участников. Команда подчеркнула, что текущие исследования уже повысили эффективность до более чем 60 %.
Эта технология нуждается в большей надежности для практического применения. Исследователи рассчитывают, что со временем их система поможет людям, утратившим речь (в том числе пострадавшим от инсульта), общаться вновь. Такая технология станет для этих людей новым средством самовыражения.
Технология может быть полезна в робототехнике. Возможность создания более естественного и интуитивного интерфейса, способного устранить расстояние между человеком и машиной, например, посредством передачи инструкций/команд мысленно.