Lightricks представила открытый локальный видеоредактор с новой моделью LTX-2.3

Компания Lightricks выпустила LTX-2.3, последнюю версию своей модели для создания видео с помощью искусственного интеллекта с открытым исходным кодом. Модель теперь доступна на Hugging Face. Она призвана повысить качество изображения и расширить возможности авторов при создании видео с помощью ИИ. Ознакомиться с моделью можно здесь.

Серия LTX представляет собой мультимодальную генеративную систему, способную создавать видео и аудио на основе подсказок. Более ранние версии модели уже демонстрировали способность генерировать кинематографические клипы с движением, перемещением камеры и синхронизированным звуком. В LTX-2.3 разработчики сосредоточились на улучшении понимания подсказок и визуальной согласованности, чтобы модель лучше выполняла инструкции, связанные с действиями, мимикой и таймингом.

Одним из главных технических усовершенствований LTX-2.3 является обновленная архитектура VAE, которая помогает создавать более четкие детали и текстуры в сгенерированных кадрах. Обновление также включает улучшения в системе текстового внимания, благодаря которым модель может точнее интерпретировать подсказки, особенно при описании движения или смены сцен.

Еще одно заметное нововведение — встроенная поддержка портретного видео. Вместо того чтобы создавать видео в альбомной ориентации и обрезать его, LTX-2.3 может сразу генерировать видео в вертикальном формате. Это особенно удобно для современных форматов контента, таких как YouTube Shorts, Instagram Reels и TikTok.

Выпустив LTX-2.3 в открытый доступ на Hugging Face, компания Lightricks продолжает поддерживать экосистему, в которой разработчики и создатели контента могут экспериментировать с локальным созданием видео с помощью искусственного интеллекта или интегрировать его в свои