Google разработала специальный алгоритм, который способен переводить речь с одного языка на другой, не используя текст и сохраняя голос говорящего. Об этом сказано в блоге Google.
При переводе текста в Google Translate речь человека сначала записывается, переводится и только потом озвучивается синтетическим голосом. Часто такой сложный алгоритм приводит к ошибкам при переводе.
Компания отказалась от такой системы и теперь речь пользователя будет переводиться на другой язык сразу, без текстовой записи. Нейросеть будет анализировать голосовой ввод и составлять его спектрограмму, затем генерировать на этой основе новую спектрограмму на нужном языке.
Разработчикам удалось сохранить оригинальную речь говорящего. Таким образом наговаривая текст для перевода на русском языке, вы услышите свой же голос, но уже на китайском или любом другом языке.
Сейчас специалисты занимаются «обучением» алгоритма, чтобы он мог понимать векторное представление слов на обоих языках и составлять грамматически верные сочетания слов.
