Исследователи из Центра человекоцентрированного искусственного интеллекта GrapheneX-UTS (Сиднейский технологический университет) совершили прорыв, разработав неинвазивный метод перевода человеческой мысли в текст и речь.
Этот замечательный прогресс стал возможен благодаря использованию портативной гарнитуры для электроэнцефалографии (ЭЭГ), подключенной к усовершенствованному кодировщику ЭЭГ, который, в свою очередь, использует разработанный внутри компании искусственный интеллект под названием «DeWave» для расшифровки связных, читаемых предложений на основе мозговых волн.
Инновационный перевод текста с уровня мозга до уровня текста
Суть этой революционной технологии заключается в ее способностиdentи считывать информацию из необработанных ЭЭГ-волн, а затем обрабатывать эти волновые формы с помощью искусственного интеллекта DeWave. Этот сложный процесс преобразует сигналы ЭЭГ в текст, что позволяет напрямую переводить мысли в письменную или устную речь.
Отличительной особенностью этой инновации является ее адаптивность, поскольку она была успешно протестирована на 29 участниках, доказав свою эффективность при работе с разнообразными уникальными ЭЭГ-сигналами головного мозга.
Ведущий профессор Лин, движущая сила этой инновации, подчеркивает ее значимость, заявляя:
«Это первая технология, которая включает в себя методы дискретного кодирования в процессе перевода текста из мозга, представляя инновационный подход к нейронному декодированию. Интеграция с большими языковыми моделями также открывает новые горизонты в нейробиологии и искусственном интеллекте»
Безграничные возможности применения
Потенциальные области применения этой прорывной технологии ограничены лишь воображением. В первую очередь, это её роль в качестве средства преобразования мысли в текст и речь для людей с такими заболеваниями, как паралич, инсульт или нарушения речи.
Кроме того, эта технология обещает продвинуть область разработки бионических конечностей, обеспечивая бесперебойную, прямую и неинвазивную связь между пользователями и их протезами.
Помимо здравоохранения, это нововведение открывает перспективы повышения производительности труда, позволяя людям преобразовывать свои мысли в текст и речь, устраняя необходимость в традиционном наборе текста или письме.
На горизонте маячат вызовы
Хотя модель искусственного интеллекта DeWave представляет собой замечательное достижение, она не обошлась без трудностей. Искусственному интеллекту потребовалось обширное обучение, чтобы избежать распространенных ошибок, таких как омофоны или синонимы, в зависимости от контекста структуры предложения.
Несмотря на многообещающие перспективы, эта технология по-прежнему требует тщательной экспертной оценки, как и любая другая прорывная инновация.
Кроме того, текущая система демонстрирует точность всего 40% на BLEU-1, что указывает на необходимость улучшений для достижения оптимальной производительности. Дополнительной проблемой является склонность ИИ выбирать синонимичные пары вместо предоставления точных переводов существительных.
Например, при обработке данных ЭЭГ, содержащих "автор", ИИ может неточно перевести это как "человек". Однако исследовательская группаdent в своей способности повысить точность до впечатляющих 90% на BLEU-1 при дальнейшем совершенствовании.
Результаты этого новаторского исследования были недавно представлены на конференции NeurIPS, состоявшейся в Новом Орлеане 12 декабря 2023 года, и привлекли значительное внимание научного сообщества и широкой общественности.
Неинвазивная альтернатива Neuralink
Сравнения с Neuralink Илона Маска неизбежны, поскольку обе технологии направлены на обеспечение прямой связи между мозгом и мозгом. Однако подход GrapheneX-UTS отличается тем, что он неинвазивный и портативный. В отличие от него, Neuralink требует инвазивной имплантации в мозг, что делает его постоянным и весьма спорным решением.
Эксперименты Neuralink вызвали этические опасения: появились сообщения о том, что ряд обезьян, участвовавших в приматологических испытаниях Neuralink, пришлось усыпить, что противоречит заявлениям Илона Маска.
Обе технологии направлены на то, чтобы дать людям с параличом возможность управлять устройствами посредством мозговой активности, но неинвазивный характер решения GrapheneX-UTS предлагает более этичную и доступную альтернативу.
Исследователи, стоящие за этой новаторской технологией, во главе с профессором К.Т. Лином, директором GrapheneX, а также Ицюнь Дуанем и аспирантом Цзиньчжоу Чжоу с инженерно-технического факультета университета, прекрасно осознают ее огромный потенциал.
Хотя ее непосредственное применение в здравоохранении и коммуникационных устройствахdent, универсальность этой технологии предполагает множество других возможностей, ожидающих изучения.
