Google представляет «Translatotron», технологию прямого перевода вашей речи на другой язык

Понимание и перевод живой речи намного сложнее, чем просто обработка письменного текста, ведь в действительности, в отличие от человеческого мозга, машинам обычно приходится проходить три отдельных этапа для преобразования устной речи с одного языка на другой. Первоначально речь должна быть интерпретирована машиной и расшифрована в текст, который затем будет переведен на нужный язык, прежде чем поступить в механизм преобразования текста в речь для произнесения его вслух. В данный момент компания Google как раз работает над тем, чтобы упростить и ускорить этот процесс, а мы с вами на выходе получили перевод нашей речи с одного языка на другой практически без задержки.

Google представляет «Translatotron», технологию прямого перевода вашей речи на другой язык. Фото.

Описанный выше процесс перевода речи с одного языка на другой, который сейчас используется повсеместно, имеет каскадную структуру, и хотя он понятен для пользователя и относительно быстр, Google решил не стоять на месте и разработать еще более естественный метод преобразования устной речи, который получил название Translatotron. Этот метод, в отличие от старого, не требует промежуточной обработки речи, а поэтому должен работать значительно эффективнее.

Google представляет «Translatotron», технологию прямого перевода вашей речи на другой язык. Фото.

Вообще, перевод устной речи не является чем-то новым, Google уже сделала эту функцию доступной в своем приложении Переводчик с 2011 года и недавно ее также получил фирменный Ассистент, а компания Microsoft, за счёт внедрения этой функции, расширила функциональность Skype, научив его переводить живою речь прямо во время разговора онлайн. Однако, как я уже сказал, эти функции обычно используют метод каскадной обработки данных для исполнения своей функциональности. Так как прямая интерпретация речи лишена промежуточных этапов, она работает быстрее, уменьшает ошибки интерпретации, которые могут возникнуть во время преобразования, и может даже игнорировать слова, которые не нужно переводить. Что также впечатляет, так это то, что Translatotron может сохранять оригинальный голос говорящего на выбранном для перевода языке, делая диалог более естественным.

На самом деле, этот эксперимент все еще находится в стадии разработки, хотя и сейчас уже может похвастаться довольно многообещающими результатами. Например, текущие результаты по-прежнему превосходят традиционные каскадные методы перевода, причем некоторые из них совершенно идентичны настоящей человеческой речи. Стоит признать, что хотя Translatotron и может имитировать оригинальный голос говорящего, он звучит очень робко, неестественно и медленно, что не даёт нам забыть о том, что прямой перевод речи все еще находится на ранней стадии разработки, но он обнадеживает и уже сейчас может облегчить преодоление языковых барьеров для многих пользователей.

Делитесь своим мнением в комментариях под этим материалом и в нашем Telegram-чате.

Теги
Лонгриды для вас
Лучшие смартфоны-раскладушки с гибким экраном

В эпоху кнопочных телефонов очень популярным форм-фактором была раскладушка. Это устройство, состоящее из двух частей (экрана и клавиатуры), складываемое для достижения компактных размеров. Когда появились модели с сенсорными экранами, а востребованность «кнопок» начала сходить на нет, формат раскладушки казался изжившим себя. Однако развитие технологий и, в частности, появление гибких дисплеев привело к возрождению флип-телефонов.

Читать далее
Когда лучшее время для покупки Google Pixel. Почему не стоит спешить с выбором


В сегменте Android-смартфонов аппараты Google Pixel неизменно пользуются уважением среди пользователей и экспертов. Последняя серия Pixel 9 только подтвердила эту репутацию: устройства получились весьма впечатляющими как по техническим характеристикам, так и по опыту использования. Но если вы сейчас задумываетесь о покупке нового смартфона — не спешите делать выбор в пользу Pixel. Для этого есть веские причины, особенно в преддверии грядущих изменений.

Читать далее
Илон Маск что-то задумал. Его стартап xAI привлекает огромные средства

Стартап xAI, основанный Илоном Маском в 2023 году, стал одним из самых заметных игроков на рынке искусственного интеллекта. Компания ведёт переговоры о привлечении $4,3 млрд акционерного капитала. Это финансирование должно дополнить уже заявленные $5 млрд, которые xAI планирует получить через продажу долговых обязательств. Такая «возня» говорит о том, что у миллиардера явно есть какие-то планы развития, под которые инвесторы готовы выделять огромные средства. Видимо, нас ждет что-то очень интересное.

Читать далее
Новости партнеров