Google представила новый алгоритм, который позволяет переводить речь пользователя, не транслируя ее в текст. Он получил название Translatotron и позволяет осуществлять более качественный перевод в реальном времени.
Ранее переводчик воспринимал язык говорящего, переводил ее в текст и озвучивал на нужном языке. Translatotron же воспринимает слова как спектрограму, и на ее основе генерирует новую спектрограму нужном языке. Результат сохраняет исходную интонацию и паузы в речи.
В компании утверждают, что такой перевод точнее и лучше воспринимает имена собственные. О новом алгоритме компания рассказала в своем блоге, где также можно послушать пример работы Translatotron. По отзывам журналистов, которые смогли ближе познакомиться с работой переводчика, звучит он пока еще неестественно.