Стартап Synthesia, который недавно вступил в стратегическое сотрудничество с Nvidia, анонсировал выпуск четвертого поколения виртуальных персонажей под названием Expressive Avatars, управляемых искусственным интеллектом с помощью модели Express-1. Ожидается, что эти персонажи будут использоваться в создании видеоконтента как «динамичные и реалистичные цифровые личности, объединяющие преимущества человеческого и искусственного интеллекта».
Для генерации виртуальных персонажей используется ИИ-модель, способная анализировать контекст сценария и реалистично воспроизводить эмоции на лице аватара. Это представляет собой значительный шаг вперед по сравнению с предыдущими поколениями, где аватары выражали слова без эмоций. По словам разработчиков, новая модель позволяет аватарам использовать точные интонации, язык тела, синхронизацию движений губ с речью, делая их похожими на живых актеров.
Основное новшество последнего поколения заключается в том, что аватары больше не зависят от заранее заданной динамики, и результаты их действий создаются в реальном времени. Synthesia утверждает, что модель способна создавать совершенно новые, уникальные выступления с широким спектром эмоций и взаимодействий, при этом неудачный результат можно легко пересоздать.
Компания также осознает потенциальные риски злоупотребления технологией и занимается разработкой методов для раннего обнаружения злонамеренных действий, укрепляет команды по безопасности ИИ и исследует технологии для обнаружения контента, созданного ИИ, такие как C2PA.