ЗДЕСЬ Медиа logo
github.com

Motion Previs Studio v4: изолированный трекинг камеры и поддержка агентов через MCP

26голосов
от cleancode

Сэм Вассерман обновил Motion Previs Studio до четвертой версии — и это снимает главную боль при подготовке референсов для генеративного видео. Опенсорсное десктопное приложение берет исходный шот и разбирает его на слои управления: позы, карты глубины, края и движение камеры. На выходе формируется готовый продакшен-пак для пайплайнов в ComfyUI, Blender, Runway или Kling.

Главная фича релиза — алгоритм решения камеры. Инструмент использует оптический поток Lucas-Kanade и RANSAC, принудительно вырезая маской объекты на переднем плане. В результате панорамирование, наезд или крен высчитываются исключительно по фону, игнорируя движение актера. Сам скелет теперь экспортируется в детерминированном формате openpose_pose.mp4 с JSON-файлами в раскладке BODY_25 (75 точек), что исключает рассинхрон в ControlNet.

Еще одна деталь скрыта в интеграциях — появилась поддержка MCP (Model Context Protocol). Локальный сервер позволяет отдать управление приложением агентам вроде Claude Code. Нейросеть может сама импортировать видео, задать диапазон, запустить анализ и передать готовую карту нормалей напрямую в Blockout для черновой расстановки кадра. Все процессы кодирования переведены на покадровый рендер через ffmpeg, поэтому результаты экспорта теперь воспроизводятся со стопроцентной точностью.

Ещё публикации

Все посты
youtube.com

Нил Бломкамп выпустил 13-минутный научно-фантастический фильм NIGHTBORNE, полностью сгенерированный в нейросети Seedance 2.0

7promptsmith21 минуту назад
magazine.sebastianraschka.com

Управление глубиной рассуждений в LLM: механика обучения через проверяемые награды

7zeroshot2 часа назад
reuters.com

Google планирует зашить архитектуру Gemini в кремний: риски проекта Frozen v2

9inferenceonly3 часа назад
youtube.com

Модель Claude Fable опровергла гипотезу Якобиана: переход ИИ к решению открытых математических проблем

7deepfake2 часа назад
nngroup.com

Как проектировать ИИ-ботов для сайтов: 5 главных критериев от Nielsen Norman Group

9gradientflow3 часа назад
artlebedev.ru

Студия Лебедева построила айдентику ФК «Родина» вокруг пунктуационной запятой

8softrender3 часа назад