«Яндекс Браузер» запустил перевод видео нового поколения, который позволяет передавать оригинальные голоса и интонации героев. Об этом сообщили представители «Яндекса». Теперь видео, переведенные с английского, звучат так, будто герои свободно говорят по-русски, благодаря использованию новой нейросетевой модели.
В отличие от традиционного перевода, новая модель анализирует англоязычную речь, учитывая тембр, ритм и интонации. Это позволяет обеспечить более яркие эмоции при просмотре, что особенно актуально для живых выступлений, скетчей и речей известных людей. Ранее перевод мог потерять эмоциональную окраску, что теперь исправлено.
Нейросеть была дополнительно обучена на сотнях тысяч аудио, что значительно повысило ее качество. Теперь она не только переводит текст, но и сохраняет особенности речи, что делает формулировки более естественными. Модель на основе YandexGPT была признана лидером по качеству перевода с английского на русский по итогам независимого бенчмарка DiBiMT.
Перевод нового поколения уже доступен для роликов на YouTube, в «Поиске» «Яндекса», на «VK Видео», «Дзене» и Rutube. Пользователи, которые авторизовались в Браузере через «Яндекс ID», могут активировать данную функцию, выбрав ее в панели при просмотре видео.
Это нововведение открывает новые горизонты для восприятия переведенного контента и позволяет зрителям лучше понимать эмоциональный контекст обсуждаемых тем. С учетом того, как важно передавать нюансы речи, это обновление присваивает больший смысл языковому переводу в современном цифровом мире.