Synthesia делает следующий шаг в видео с искусственным интеллектом, создавая «выразительные аватары

Доступные уже сегодня, эти аватары с искусственным интеллектом идут на шаг впереди обычных цифровых аватаров и регулируют свой тон, выражение лица и язык тела, основываясь на контексте контента, который они предоставляют. Это произошло всего через неделю после того, как Microsoft продемонстрировала VASA - систему искусственного интеллекта, которая преобразует снимки человеческих голов в говорящие и поющие видеоролики, сопровождаемые мимикой и движениями головы.Однако, в отличие от VASA, которая является лишь исследовательской работой, технология, лежащая в основе выразительных аватаров, вполне реальна и поможет клиентам Syntheisa создавать более реалистичные видеоролики с искусственным интеллектом, чем когда-либо, для своей целевой аудитории.

Следующий шаг Synthesia в области ИИ-видео

Компания была основана в 2017 году командой исследователей и предпринимателей в области ИИ, в том числе выходцами из Стэнфордского и Кембриджского университетов. Synthesia создала комплексную платформу для создания пользовательских голосов и аватаров ИИ (пользователи могут даже использовать существующие) и использования их с предварительно написанными или разработанными ИИ сценариями для создания видео ИИ студийного качества.Предложение получило широкое распространение на уровне предприятий: более 200 000 человек использовали цифровые аватары для создания более 18 миллионов видеороликов. Однако аватары, которые предлагает Synthesia или кто-либо еще, имеют один существенный недостаток: понимание чувств. В отличие от реального видеоведущего, цифровые аватары не могли менять свой тон, выражение лица или жесты в соответствии со сценарием; все эти аспекты должны были быть заранее заданы.

Теперь ситуация меняется с появлением выразительных аватаров.

Как объясняет Synthesia, новые аватары с искусственным интеллектом способны понимать контекст и настроение, передаваемое в тексте, и менять свой тон и выражение лица, чтобы передать речь. Компания утверждает, что они уже могут демонстрировать различные эмоции, тонко регулируя выражение лица, моргание и даже взгляд в глаза в соответствии с речью. Представьте, что аватар улыбается и смеется, когда говорит о чем-то восторженном, или говорит медленно и с большими паузами, когда речь грустная или печальная.

«С этими новыми аватарами мы не просто создаем цифровые рендеры, мы представляем цифровых актеров. Эта технология придает цифровым аватарам уровень сложности и реалистичности, который стирает грань между виртуальным и реальным", - написал в своем блоге Джон Старк, технический директор компании.