«Сбер» открыл доступ к нейросети Kandinsky Avatar 1.0 для создания видеоаватаров

«Сбер» сделал общедоступной свою новую нейросеть Kandinsky Avatar 1.0. Эта технология позволяет создавать видеоролики с "говорящими" персонажами: достаточно загрузить фотографию и аудиозапись, чтобы получить готовый анимированный аватар. Сгенерированные видео могут длиться до одной минуты и воспроизводятся с частотой 24 кадра в секунду.

Ключевая особенность Kandinsky Avatar 1.0 заключается в автоматической синхронизации движений губ персонажа с произносимой речью. Нейросеть также самостоятельно добавляет мимику, повороты головы и естественные жесты, делая аватара максимально реалистичным. Это значительно упрощает процесс создания видеоконтента с виртуальными ведущими или персонажами.

Разработчики могут бесплатно скачать код и веса моделей Kandinsky Avatar 1.0 для использования в своих проектах. Это касается как некоммерческих, так и коммерческих разработок. Такой подход способствует широкому распространению технологии и появлению новых кейсов её применения в различных сферах, от маркетинга до образования.