Создано устройство, способное слышать то, что люди говорят «про себя»

Ростов-на-Дону, 27.11.2020 - Ростов Онлайн.

Американские ученые создали систему из электромиографических сенсоров, которые распознают беззвучную речь и преобразует её в слышимую при помощи нейросети. Это поможет создать гарнитуру, при помощи которой можно говорить по телефону, не издавая при этом никаких звуков.

Специалисты использовали метод «переноса звука из вокализованной записи в бесшумную с сохранением высказывания», а чтобы генерировать речь, использовали декодер WaveNet, сообщает Venture Beat.

Несмотря на то, что при чтении «про себя» мы не издаем никаких звуков и не произносим слова «вслух», наш мозг начинает процесс субвокализации и дает сигналы голосовым мышцам совершать движения, такие же, как и при «обычной» речи. Ученые научились распознавать эти мышечные сокращения при помощи электродов на шее и лице, измеряющих электрическую активность мышц.

Цифровое озвучивание безмолвной речи раскрывает разнообразные возможности применения. Например, чтобы беседовать по телефону беззвучно, не мешая окружающим. Или беседовать, когда вести разговор вслух нельзя и необходимо соблюдать тишину. Такое беззвучное общение может оказаться удобным и когда вокруг слишком шумно. Это изобретение важно для людей с нарушениями речи и повреждениями речевого аппарата или для совершенствования возможностей различных голосовых помощников.

Ученым еще предстоит оценить все возможности нового устройства.

Хотите узнавать об интересных событиях первыми? Подпишитесь на нас в Яндекс.Дзен, Google.Новости!