Эксперт по ИИ назвал 6 нейросетей для генерации видео из текста и изображения

Нейронные сети

Эксперт по искусственному интеллекту и нейронным сетям Константин Довгий назвал 6 полезных нейросетей для генерации видео из текста или изображения. Своим мнением автор Youtube-канала Salladorn AI поделился с изданием Pogovorim.by 29 октября. 

 

 

 

Стремительное развитие нейросетей открывает множество возможностей, в том числе и для генерации видео.

 

По словам эксперта, уже существуют два основных механизма генерации видео. Первый - на основе изображения, а второй - на основе текстового описания, либо же их комбинации.

 

При этом более перспективное направление - это генерация видео по текстовому описанию, отмечает Константин Довгий.

 

Как итог следует выделить 6 нейросетей по созданию видео:

 

1. Pika Labs - одна из самых продвинутых нейросетей по созданию видео. Делает качественную анимацию. Но есть проблемы, когда нужно учитывать много факторов, заданных в тексте. Генерирует 3-секундные видео.

 

2. RunwayML - умеет генерировать длинные видео, вплоть до 16 секунд, но есть проблемы с качеством, поскольку очень часто идет хаотичная смена кадров. Также есть проблемы с анимацией персонажей, людей.

 

3. Genmo - неплохо справляется с генерацией по текстовому описанию, старается учитывать все заданные детали, достойная детализация, но в целом качество на выходе среднее.

 

4. Morph Studio - умеет учитывать множество деталей, заданных в описании. Неплохое качество видео, но есть серьезные проблемы с анимацией людей - такое ощущение, что нейросеть заточена под создание фильма ужасов, иронизирует Константин Довгий.

 

5. Kaiber - не умеет делать видео по текстовому описанию, однако справляется с задачей на основе картинки. Имеет смысл использовать, когда нужна просто анимация без чего-то конкретного. Также умеет делать анимацию к музыке, но практически без контроля того, что получится в итоге.

 

6. Moonvalley - на данный момент самая качественная нейросеть для генерации видео по текстовому описанию. Учитывает множество деталей, позволяя создавать потрясающие видео, максимально приближенные к текстовому описанию.

 

Также рекомендуем