Создан переводчик устной речи, сохраняющий интонацию и паузы

Компания Google разработала специальный алгоритм, который способен напрямую переводить речь на другой язык, не используя при этом текст и сохраняя голосовые данные и темп речи говорящего. Об этом сообщается в блоге американской компании.

Отмечается, что в руководстве Google решили отказаться от перевода речи в текст в Google Translate и озвучивания ее после. Дело в том, что это приводит к ошибкам при переводе. Отныне речь говорящего сразу будет переводиться с одного на другой язык.

Для этого нейросеть, обладающая долгой краткосрочной памятью, будет принимать голосовой ввод и обрабатывать его как спектрограмму, после чего генерировать на этой основе новую спектрограмму на другом языке.

Разработчики программы смогли сохранить оригинальный голос говорящего даже в переведенной речи. Сейчас специалисты учат алгоритм понимать векторное представление слов на обоих языках, а также грамматически верным формам и сочетаниям слов на большом примере.

Ранее «МИР 24» писал об итальянце, который попал под суд в Австрии из-за ошибки электронного переводчика.