AI-ассистенты Telnyx теперь могут использовать более одной модели транскрипции в рамках одного вызова. Два новых режима, «Резервный» (Fallback) и «Усилитель языка» (Language Booster), позволяют поддерживать работу вызовов при сбоях моделей и выбирать наиболее точную расшифровку для каждой реплики.

Что нового

Режим «Резервный» (Fallback): добавьте до 3 резервных моделей транскрипции в порядке приоритета. Если используемая модель дает сбой в начале или во время вызова, управление переходит к следующей, и вызов продолжается. Настраивается через transcription.fallback_models.
«Усилитель языка» (Language booster): вторая модель выполняет транскрипцию параллельно с основной, а специальное правило определяет, какую расшифровку будет использовать ассистент. best_turn (по умолчанию) выбирает лучшую расшифровку для каждой реплики, best_engine фиксирует более эффективную модель на весь вызов, а merge_words объединяет арабские и английские слова, произнесенные в одном предложении. Настраивается через transcription.challenger.

Ассистент может использовать только один режим за раз, при этом каждая резервная модель или усилитель имеют свои собственные настройки языка и провайдера.

Почему это важно

Голосовой агент эффективен ровно настолько, насколько точна расшифровка, на основе которой он принимает решения. Раньше вы выбирали одну модель транскрипции для каждого вызова: если она давала сбой, качество вызова снижалось, а если собеседники переключались между языками в середине предложения, точность падала. Благодаря наличию обоих режимов в одной панели управления вы можете подобрать оптимальную пару моделей для каждого сценария развертывания, вместо того чтобы добавлять еще одного поставщика или новую интеграцию. В наших внутренних тестах комбинация deepgram/flux с deepgram/nova-3 в качестве усилителя снизила количество ошибок в английских словах с 5,7% до 4,6%, а пара Basira и Cohere с функцией merge_words сократила количество ошибок с 27,7% до 22,4%.

Примеры использования

Линии поддержки и исходящие коммуникации: объедините до 3 резервных моделей, чтобы сбой транскрипции никогда не приводил к завершению вызова.
Контакт-центры, обслуживающие арабо- и англоговорящих клиентов: используйте merge_words, чтобы речь клиентов, переключающихся между языками в середине предложения, транскрибировалась точно от начала до конца.
Настройка точности: используйте best_engine, чтобы позволить двум моделям транскрибировать первые реплики, а затем продолжить вызов с той, которая показала более высокий результат.

Начало работы

В портале Mission Control откройте раздел AI, затем Assistants, выберите своего ассистента и перейдите на вкладку Voice. В разделе Transcription добавьте модели в поле Additional Transcription Models.
Или настройте режимы через API при создании или обновлении ассистента: