group-telegram.com/neurogen_news/1053
Last Update:
Новогодняя подборка нейросетей для генерации видео и анимации изображений
Друзья, вот и подходит к концу 2024 год! Самое время подвести итоги и вспомнить самые интересные релизы в мире нейросетей. Если прошлый год был год генерации изображений, то этот год отличился в области генерации видео: вышло огромное количество интересных проектов, которые, в большинстве случаев можно попробовать бесплатно.
✨ Май 2024: Vidu
В мае была представлена Vidu — модель, генерирующая видео с разрешением 1080p и продолжительностью до 16 секунд за одну генерацию.
🔹 Особенности: высокая динамичность и понимание профессиональных фотографических техник.
Попробовать Vidu. В месяц бесплатно дается 80 кредитов, на генерацию одно видео уходит минимум 4.
---
✨ Июнь 2024: Runway Gen-3 Alpha
Летом компания Runway выпустила Gen-3 Alpha, инструмент для профессионального видеопроизводства.
🔹 Особенности: простота создания высококачественных видеороликов на основе текстовых описаний, что особенно полезно для режиссёров и продюсеров.
Попробовать Runway можно бесплатно, на это дается 125 кредитов, но лишь единоразово, дальше только подписка.
---
✨ Июнь 2024: Luma Dream Machine и Kling AI
- Luma Dream Machine: инструмент для создания анимированных видео с разнообразными эффектами, который особенно понравился пользователям соцсетей.
Попробовать Dream Machine. Также есть бесплатный доступ.
- Kling AI: быстро завоевала популярность благодаря доступности и качеству анимации, открывая новые горизонты для творцов.
Попробовать Kling. Выдают бесплатные кредиты для генерации, иногда зачисляют бонусные кредиты в рамках акций.
---
✨ Сентябрь 2024: MiniMax Hailuo AI Video-01
Осенью китайская компания MiniMax выпустила Hailuo AI Video-01 — модель, способную генерировать высококачественные видеоролики на основе текстовых или графических описаний.
🔹 Особенности: простой интерфейс и высокая скорость работы.
Попробовать Hailuo. Как мне показалось, наиболее интересная модель из всех, отличное понимание промпта, но к сожалению хоть и есть бесплатные кредиты - безумные очереди.
---
✨ Октябрь 2024: Pika Labs 1.5
В октябре Pika Labs обновила свою платформу до версии 1.5, добавив больше эффектов и возможностей для создания креативного контента.
🔹 Особенности: идеально подходит для пользователей социальных сетей.
Попробовать Pika Labs.
---
✨ Декабрь 2024: Sora от OpenAI
В конце года OpenAI представила Sora — нейросеть для генерации видео по текстовым описаниям.
🔹 Особенности: высокая точность и качество создаваемого контента, мощный инструмент для креативных индустрий.
В отличие от всех прошлых моделей, Sora доступна только в рамках подписки ChatGPT Plus или Pro.
---
💡 Открытые модели генерации видео:
Помимо коммерческих решений, 2024 год ознаменовался выходом нескольких open-source моделей:
- LTX-Video:
🔹 Разработчик: Lightricks
🔹 Характеристики: по словам разработчиков генерирует 5-секундные видеоролики с разрешением 768×512 пикселей всего за 4 секунды, что быстрее реального времени.
- Mochi 1:
🔹 Разработчик: Genmo
🔹 Характеристики: высокопроизводительная модель на архитектуре AsymmDiT с 10 миллиардами параметров. Поддерживает видео 480p с частотой 30 кадров/сек.
- HunyuanVideo:
🔹 Разработчик: Tencent
🔹 Характеристики: модель на базе архитектуры MoE с 13 миллиардами параметров, обеспечивает временную согласованность и подходит для длинных видеопоследовательностей.
Все эти модели доступны в свободном доступе, и ограничением для работы является лишь видеопамять вашей GPU - должно быть не менее 24 гигабайт для комфортной работы.
—
Но все это было в 24 году. Я еще не перечислил гигантский прогресс в области LLM, не упомянул про Flux и множество других релизов.
Думаю, что 2025 год будет еще более насыщенным на удивительные релизы и открытия, которые изменят нашу жизнь к лучшему.
С наступающим 2025 годом!