Synthesia создала интерактивного цифрового двойника журналиста

Что произошло

Synthesia предложила журналисту TechCrunch создать собственного цифрового двойника во время открытия нового офиса компании в Нью-Йорке. В результате журналист получил персональный аватар, читающий заданный сценарий, и два интерактивных аватара, которые могут слушать и отвечать.

Интерактивный аватар обучен только материалу о мошенничестве среди стартапов с венчурным финансированием. Он не предназначен для ответов на вопросы за пределами этой темы.

Как работает аватар

Для создания цифрового двойника журналист прошёл съёмку в мини-студии Synthesia: команда сделала фотографии и записала двухминутный образец голоса. Аватар работает на сочетании моделей преобразования речи в текст, языковой обработки, преобразования текста в речь и генерации видео.

В технологический стек входят собственные видео- и голосовые модели Synthesia. Клиенты компании также могут выбирать технологии Cartesia, ElevenLabs, Google или OpenAI, а размещать аватары в любом облаке либо поручить хостинг Synthesia.

Почему это важно

Synthesia развивает инструменты для корпоративных интерактивных видео и обучения. Её продукт Roleplay Sessions позволяет сотрудникам тренировать, например, презентации продаж перед интерактивным AI-аватаром, который отвечает и оценивает ответы.

Компания описывает три направления продуктов: платформу создания и распространения видео с классическими аватарами, агентскую платформу Sessions для опросов и ролевых сценариев и API-платформу для объединения моделей Synthesia с другими технологическими сервисами.

Контекст

Изначально Synthesia базировалась в Великобритании и работает на рынке цифровых аватаров наряду с D-ID, HeyGen и Colossyan. Ранее компания сообщала об оценке в $4 млрд и ARR свыше $100 млн.