Вы когда-нибудь задумывались о том, чтобы превратить свои мысли в слова, не шевеля губами? Группа китайских исследователей решила воплотить эту «научную фантастику» в реальность с помощью системы, производящей речь (или голосовой синтез) путем интерпретации нейронной активности мозга.
Мысли и слова
Il South China Morning Post назад что исследователи создали «машину для чтения мыслей», способную превращать человеческие мысли в устную речь на китайском языке.
Используемая техникаэлектрокортикография (ЭКоГ), который измеряет прямые сигналы от мозга. И как получить эти сигналы? Через электроды, имплантированные в мозг во время операции.
Тысяча лиц «тонального» языка
Вот и красота. Тональные языки, такие как мандаринский, вьетнамский, пенджаби и другие, используют тон и произношение синергетически для передачи значения. Слово может полностью измениться в зависимости от тона, а также обычных изменений согласных и гласных.
В своей статье исследователи объясняют, что они предложили концепцию «разделяй и властвуй», предполагая, что тон и основной слог могут быть декодированы отдельно от нейронной активности, а затем тональная речь может быть синтезирована путем их рекомбинации.
От операционного стола к голосовому синтезу: тесты
Полигоном для испытаний стали пять добровольцев, перенесших операцию на головном мозге по удалению опухоли. Во время операции, когда добровольцы бодрствовали, их просили произнести серию определенных слогов («ма» и «ми» четырьмя разными тонами), при этом записывалась нервная активность.
На основе этих записей команда смогла усовершенствовать алгоритмы, интерпретирующие нейронную активность, и синхронизировать записи ЭКоГ с аудиозаписями.
Будущее слов… только подумайте!
Очевидно, что это исследование открывает путь в мир возможностей. Эти результаты не только предлагают методы лечения анартрии (полная потеря речи), но также могут повысить эффективность общения. интерфейсы мозг-компьютер.
Исследование было опубликовано в журнале Science Advances, и я связываю это здесь.
