Вместе с этим, делимся показом нашего решения для образовательных целей и HR-задачи!
Разработан и создан ИИ-аватар для диалога в реальном времени по разным сценариям.
В данном случае, этот запрос был нами получен от одного большого маркетплейса в России. Задача была - сделать Аватара-учителя для обучения тимлидеров технических команд. Мы сделали ролевую игру. ИИ-аватар - это рассерженный разработчик. Задача пользователя - отработать возражения и сделать так, чтобы «разработчик» не ушел из компании.
Под капотом:
- Модель speech2text (распознавали голоса и перевод его в текст). Да, с ИИ-аватаром можно общаться и голосом!
- LLM (большая языковая модель). Который как раз играет роль «рассерженного» разработчика
- Модель text2voice (преобразование текста в голос). При том, голос можно кастомизировать и сентизировать его на основании вашего! В данном случае, сделано на примере голоса Директора z-union Роберта Васильева
- Генерирующая самого ИИ-Аватара модель (lipsync-модель). Можете заметить - губы ИИ-Аватара-Роберта двигаются в такт словам. Это добавляет реализма. Как вы понимаете, персонажа на генерацию можем сделать вашего!
Все это упаковано в вэб-приложение и уже вовсю тестируется клиентом! Открыты к новым запросам и созданию новых вариантов решений!
Разработан и создан ИИ-аватар для диалога в реальном времени по разным сценариям.
В данном случае, этот запрос был нами получен от одного большого маркетплейса в России. Задача была - сделать Аватара-учителя для обучения тимлидеров технических команд. Мы сделали ролевую игру. ИИ-аватар - это рассерженный разработчик. Задача пользователя - отработать возражения и сделать так, чтобы «разработчик» не ушел из компании.
Под капотом:
- Модель speech2text (распознавали голоса и перевод его в текст). Да, с ИИ-аватаром можно общаться и голосом!
- LLM (большая языковая модель). Который как раз играет роль «рассерженного» разработчика
- Модель text2voice (преобразование текста в голос). При том, голос можно кастомизировать и сентизировать его на основании вашего! В данном случае, сделано на примере голоса Директора z-union Роберта Васильева
- Генерирующая самого ИИ-Аватара модель (lipsync-модель). Можете заметить - губы ИИ-Аватара-Роберта двигаются в такт словам. Это добавляет реализма. Как вы понимаете, персонажа на генерацию можем сделать вашего!
Все это упаковано в вэб-приложение и уже вовсю тестируется клиентом! Открыты к новым запросам и созданию новых вариантов решений!