Команда Tongyi Lab, принадлежащая китайской компании Alibaba, представила новый нейросеть LHM (Large Animatable Human Reconstruction Model), предназначенный для анимации персонажей с использованием видеореференсов. Эта информация опубликована на официальном сайте ИИ-модели.
Alibaba разработала нейросеть для анимации персонажей
https://rb.ru/news/alibaba-ai-video/
По словам создателей нейросети, ранее процесс анимирования персонажа в фильмах и играх заключался в создании статичного изображения, которое затем анимировалось. В Tongyi Lab применили метод наложения изображений на видео, что позволяет добиться большей точности в движениях.
Однако есть некоторые сложности. Например, LHM пока неэффективно обрабатывает видео, где сменяется ракурс или резко меняется поза персонажа. Разработчики обещали исправить эту проблему.
Где скачать? LHM доступна для тестирования на платформе HuggingFace. Бесплатно можно генерировать ролики длиной до 10 секунд. Для более точной анимации разработчики рекомендуют скачать код с Github и установить модель на локальной машине.
- Ранее Alibaba сообщила, что в течение следующих трех лет компания инвестирует $53 миллиарда в развитие искусственного интеллекта и облачных технологий. Эта сумма превышает все инвестиции Alibaba в эти области за последние 10 лет.
Фото на обложке: zhu difeng / Shutterstock / FOTODOM
Нашли опечатку? Выделите текст и нажмите Ctrl + Enter