“`html
Rhymes AI представляет Allegro-TI2V: Прорыв в визуальном повествовании с помощью технологий генерации видео на основе ИИ
Rhymes AI открывает доступ к Allegro-TI2V — современному модели генерации видео из текста и изображений, которая обещает изменить создание визуального контента. Это новаторское решение является важным шагом в быстро развивающемся мире генеративных технологий ИИ.
Ключевые особенности Allegro-TI2V:
- Длина контекста 79.2K, что эквивалентно 88 кадрам.
- Высокое разрешение 720×1280 пикселей.
- Генерация видео со скоростью 15 кадров в секунду, с возможностью интерполяции до 30 FPS.
- Поддержка нескольких режимов точности (FP32, BF16, FP16).
- Эффективное использование памяти GPU — всего 9.3 ГБ в режиме BF16.
Allegro-TI2V имеет компактную, но мощную архитектуру с 175 миллионами параметров VideoVAE и 2.8 миллиарда параметров VideoDiT. Это позволяет создавать детализированные и выразительные видео, которые отражают суть предоставленных пользователем подсказок и изображений.
Новые режимы генерации видео:
- Генерация последующих видео: Пользователи могут создавать продолжение видео, предоставляя текстовую подсказку и начальное изображение.
- Генерация промежуточного видео: При наличии первого и последнего кадра модель может создавать промежуточные видео, что позволяет более сложное и контролируемое создание видео.
Allegro-TI2V выпущен под лицензией Apache 2.0, что позволяет исследователям, разработчикам и создателям контента изучать и использовать эту технологию. Доступна полная документация и ресурсы для быстрой интеграции модели в рабочие процессы. Основные требования: Python 3.10 или выше, PyTorch 2.4 или новее, и CUDA 12.4 или позже. Простая командная строка позволяет пользователям генерировать видео с минимальной настройкой.
Применение Allegro-TI2V:
Модель может быть использована создателями контента, кинематографистами, разработчиками игр и цифровыми художниками для:
- Быстрого прототипирования визуальных концепций.
- Создания динамических фонов.
- Разработки уникальных визуальных эффектов.
- Исследования новых форм креативного выражения с помощью ИИ.
Allegro-TI2V может генерировать 6-секундные видео примерно за 20 минут на одном GPU H100, сокращая это время до 3 минут при использовании конфигурации 8xH100. Функция выгрузки на CPU дополнительно улучшает доступность, снижая требования к памяти GPU.
Заключение:
Allegro-TI2V демонстрирует невероятный потенциал машинного обучения в креативных областях. Его открытый исходный код, техническая сложность и удобный интерфейс делают его важным шагом к новым формам цифрового творчества.
Если вы хотите, чтобы ваша компания развивалась с помощью ИИ, используйте Allegro-TI2V. Проанализируйте, как ИИ может изменить вашу работу, определите ключевые показатели эффективности (KPI) и подберите подходящее решение. Внедряйте ИИ постепенно, начиная с небольших проектов.
Если вам нужны советы по внедрению ИИ, пишите нам в Telegram. Следите за новостями о ИИ в нашем Telegram-канале или в Twitter.
Попробуйте AI Sales Bot — этот ИИ-ассистент в продажах помогает отвечать на вопросы клиентов и генерировать контент для отдела продаж.
Узнайте, как ИИ может изменить ваши процессы с решениями от AI Lab — будущее уже здесь!
“`
