Google научил наушники переводить речь в режиме реального времени

что произошло

Google представил обновление для Google Translate, которое превращает любые наушники в инструмент для синхронного перевода речи. Новая функция под названием Live Translate with headphones уже начала распространяться на iOS и Android.

детали

Теперь приложение позволяет подключить любые проводные или Bluetooth-наушники и использовать режимы Live или Conversation, чтобы слышать перевод речи в реальном времени прямо в ушах. Смартфон при этом выполняет роль мозга, обрабатывая речь и перевод, а наушники становятся каналом передачи звука. В отличие от предыдущих решений больше не требуется специального оборудования вроде Pixel Buds.

Роль ИИ

Ключевую роль в работе функции играет модель Google Gemini. Она обеспечивает более естественный перевод: сохраняет интонацию и ритм речи, учитывает контекст и сленг, а также передает эмоциональную окраску фраз. За счёт этого перевод выглядит более живым и понятным в диалоге.

На данный момент поддерживается более 70 языков. Пользователям доступны разные режимы: Conversation – для общения в диалоге, Listening – когда перевод звучит только в наушниках, и Text-only – текстовый формат без озвучки. При этом русский язык пока не полностью поддерживает голосовой режим и чаще работает в текстовом формате.

Функция уже вышла из стадии бета-тестирования и официально запущена на iOS, а также постепенно расширяется на Android и новые страны, становясь доступной на десятках рынков.

что ещё

Несмотря на прогресс, технология пока не лишена ограничений: возможны ошибки при шуме или быстрой речи, а также сложности с акцентами и редкими выражениями.

Разработка считается одним из самых практичных применений искусственного интеллекта на сегодня: она позволяет общаться с иностранцами без языкового барьера, переводить лекции и встречи в реальном времени и фактически превращает смартфон с наушниками в персонального переводчика без дополнительного оборудования.