Lightricks выпустила LTX-2, новую версию своего видеогенератора. Он создает видео со звуком в 4K с частотой 50 кадров в секунду, хотя и не в реальном времени.


В качестве входных данных можно использовать текст, изображения, видео, аудио, карты глубины и отснятый материал для управляемой генерации. LTX-2 поддерживает лоры и генерацию по нескольким ключевым кадрам.


Попробовать новинку (кроме пользователей из России) можно на официальном сайте. LTX-2 также доступен на Fal.ai, а также в Replicate и ComfyUI.


Судя по всему, тест с созданием видео про человеко-рыбу прошел не совсем удачно. И лунную походку LTX-2 тоже пока не умеет делать.


Возможно, качество 4K видео не идеально, но зато генерация выполняется быстро. Ждем версию с открытым исходным кодом.


Репозиторий на GitHub – новую модель обещают опубликовать в конце ноября.





Вышел LTX-2 — «убийца» суны и вео, по крайней мере так говорят в сети. Генерит оч реалистично и тоже со звуком. Да, автоозвучка теперь мейнстрим.


Что умеет:

• Выдаёт 4K при 50 кадрах в секунду (есть варианты 25 FPS и разрешения от 720p до 1440p)
• Делает видео от 6 до 10 секунд, скоро добавят 15
• Работает быстрее конкурентов и стоит вдвое дешевле — $0.04 за секунду
• Генерирует движения, диалоги (на русском в том числе), локации и музыку
• Настраивается через текст и картинки

По сути, это первый open-source движок, который тянет на полноценный творческий инструмент. Раньше такое было только в закрытых сервисах.


Можно бесплатно потестить и склепать 3-4 ролика тут. Мне, в целом, зашло 👍


@creativethecreator

Спасибо @m_franz