Голосовые ИИ-агенты теряются в двуязычии: исследование

Новое исследование ServiceNow-AI показало, что большинство голосовых агентов с трудом понимают людей, говорящих одновременно на двух языках (code-switching). Команда протестировала 7 систем распознавания речи на примерах испанско-английского, франко-английского и других языковых пар. ElevenLabs Scribe V2 и AssemblyAI Universal-3 Pro показали лучшие результаты, а вот OpenAI Whisper просто переводит двуязычную речь вместо транскрипции.

AI-обработка оригинала Hugging Face Blog; редакция Hamidun News
Голосовые ИИ-агенты теряются в двуязычии: исследование
Источник: Hugging Face Blog. Коллаж: Hamidun News.
Слушать статью

Голосовые ИИ-агенты слабо справляются с двуязычными клиентами — это показало исследование ServiceNow-AI, которая протестировала семь популярных систем распознавания речи на примерах code-switching, когда люди плавно переходят с одного языка на другой в одном высказывании.

Что такое code-switching в речи?

Code-switching — когда люди плавно переходят с одного языка на другой в одном высказывании, переплетая слова и фразы.

Почему голосовые ИИ-агенты плохо работают с двуязычием?

Голосовые ассистенты и агенты обучены в основном на монолингвальных данных, из-за чего плохо справляются с распознаванием смешанной речи.

Вопросы и ответы по материалу

Что такое code-switching в речи?

Code-switching — когда люди плавно переходят с одного языка на другой в одном высказывании, переплетая слова и фразы.

Почему голосовые ИИ-агенты плохо работают с двуязычием?

Голосовые ассистенты и агенты обучены в основном на монолингвальных данных, из-за чего плохо справляются с распознаванием смешанной речи.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Практика · Hamidun Academy

Соберите рабочего ИИ-агента или сервис своими руками без ручного кода

В Академии Жемала Хамидуна (academy.hamidun.com) открыт бесплатный 72-часовой тест-драйв: интерактивные скетч-уроки по Claude Code и Cursor, живой Tech Radar и готовые шаблоны агентов.

Открыть 72ч бесплатный доступ →Интенсив по Вайб-кодингу
Что вы думаете?
Загружаем комментарии…