Synthesia представила Roleplay Sessions — платформу, позволяющую корпоративным сотрудникам отрабатывать профессиональные задачи с помощью интерактивных ИИ-аватаров. Эти цифровые двойники используют интегрированные модели преобразования голоса в текст и генерации видео, чтобы слушать, отвечать и оценивать действия пользователей во время симуляций, таких как презентации продаж.
Интерактивное обучение с помощью цифровых двойников
Synthesia расширила свою технологию генерации видео, добавив интерактивных аватаров, способных вести диалог в режиме реального времени. Новый продукт Roleplay Sessions позволяет сотрудникам вести двусторонний диалог с цифровым двойником, обученным на специализированных наборах данных. Система использует технологический стек, объединяющий видео- и языковые модели для обработки голосового ввода и генерации соответствующих визуальных и речевых ответов.
Для создания таких аватаров компания записывает две минуты голоса человека и делает снимки высокого разрешения. Полученного цифрового двойника можно настроить для чтения текста по сценарию или для работы в качестве интерактивного агента. Помимо собственных проприетарных моделей видео и голоса Synthesia, платформа поддерживает интеграции со сторонними провайдерами, такими как ElevenLabs, OpenAI и Google.
Развёртывание и технические ограничения
Предприятия могут размещать эти аватары в собственной облачной инфраструктуре или использовать хостинговые услуги Synthesia. В недавних тестах интерактивные возможности ограничивались информацией, содержащейся в конкретных обучающих документах, предоставленных на этапе настройки. Это гарантирует, что аватар остаётся сосредоточенным на заданной тематике, например корпоративных PR или конкретных статьях.
Данная разработка знаменует переход от одностороннего создания видео к интерактивному моделированию. Однако точность системы обратной связи и оценки зависит от качества базовых языковых моделей, выбранных корпоративным клиентом. Доступность в настоящее время сосредоточена на корпоративных учебных средах, а не на массовом потребительском использовании.
Первоисточник
В этом отчете кратко изложен материал указанного ниже источника. Аналитика приводится отдельно; заявления о продуктах и исследованиях атрибутируются их авторам.
Читать оригинал на TechCrunch AI