Инженеры Ратгерского университета (США) представили систему ChatBCI-Assist - неинвазивный интерфейс "мозг - компьютер", который с помощью искусственного интеллекта (ИИ) переводит активность мозга в слова и фразы. Разработка позволяет общаться почти в три раза быстрее по сравнению с обычными системами, где нужно по буквам набирать текст. Результаты опубликованы в журнале IEEE Transactions on Biomedical Engineering.

Неинвазивный интерфейс не требует операции: пользователь надевает шапочку с датчиками, которые улавливают электрические сигналы кожи головы. Система не читает свободные мысли, а определяет, на какой именно элемент на экране человек сознательно сосредоточился. На мониторе отображаются клавиатура и подсказки слов и фраз; строки и столбцы быстро мигают. Когда вспыхивает строка или столбец с нужным выбором, мозг выдаёт электрический отклик - так называемый P300. Этот сигнал появляется примерно через 300 миллисекунд (тысячных долей секунды) после того, как человек замечает важный для него стимул. Датчики фиксируют отклик, и компьютер по времени вспышки определяет, какую букву, слово или фразу выбрал пользователь.

Классические "спеллеры" на основе P300 существуют десятилетия, но работают медленно: чтобы написать "Я хочу воды", приходится выбирать каждую букву. ChatBCI-Assist ускоряет процесс за счёт большой языковой модели - того же типа ИИ, что используется в чат-ботах. Модель дообучили на примерах сообщений, отражающих потребности людей с боковым амиотрофическим склерозом (БАС) - прогрессирующим заболеванием, при котором гибнут нервные клетки, управляющие мышцами. Основываясь на выборе пользователя и контексте беседы, ИИ предлагает готовые формулировки. Например, вместо побуквенного набора "Я хочу воды" можно выбрать подсказку "Дайте мне воды" - смысл тот же, но усилий меньше.

"Мы призываем к смене перспективы, - говорит руководитель исследования Лале Наджафизаде, профессор Ратгерской инженерной школы. - Вместо того чтобы воспроизводить каждое слово, ассистивные системы могут предсказывать намерение и помогать выразить его эффективнее". Пользователь сохраняет контроль: он сам решает, принять подсказку или продолжить набирать текст. Языковая модель работает локально на компьютере, а не в облаке, поэтому личные сообщения о здоровье и личной жизни не передаются через интернет; система может работать и без стабильной связи.

В экспериментах со здоровыми участниками ChatBCI-Assist проверяли в двух режимах. В первом ("копирование") нужно было точно воспроизвести предложение - скорость оказалась почти вдвое выше, чем у традиционной системы с предсказанием по словарю. Во втором ("семантический набор") требовалось передать тот же смысл, разрешая ИИ предлагать более короткие или иные формулировки, - скорость выросла почти втрое по сравнению с базовой. Участники также отметили, что система снижает нагрузку, а режим с ИИ субъективно проще.

Пока испытания проводились только на здоровых добровольцах. Клинические тесты с пациентами с БАС находятся в стадии планирования: Наджафизаде сотрудничает с врачом Шан Чен из клиники Ратгерского медицинского университета. Учёные подчёркивают: для людей с продвинутой стадией БАС, у которых сохранён интеллект, но утрачен контроль мышц, такие системы могут стать способом выразить мысли. Традиционные устройства на основе слежения за взглядом со временем становятся труднодоступными, если глаза перестают слушаться. Новая разработка - шаг к более быстрому и доступному общению, однако до готового продукта ещё далеко.

Источник: Tech Xplore