NVIDIA Physis-Lang описывает физику словами и выходит на первое место в Physics-IQ Verified

NVIDIA анонсировала Physis-Lang, подход к генерации видео, в котором носителем «знаний о мире» служит естественный язык. По заявлению компании, система заняла первое место в рейтинге Physics-IQ Verified, одном из немногих тестов, где видеомодели проверяют на физическую достоверность, а не на красоту кадра. Исходный пример из анонса почти бытовой: модели дают фразу «масло плавится при нагреве» и смотрят, что получится на экране.

Почему физика в видео до сих пор ломается

Современные видеомодели хорошо рисуют текстуры, свет и движение камеры. Но стоит попросить их показать таяние, столкновение или переливание жидкости, как появляются типичные артефакты: объекты проходят друг сквозь друга, масло исчезает без лужи, предметы меняют форму без причины. Модель выучила, как выглядят кадры, но не усвоила причинные связи между ними.

Именно это измеряет Physics-IQ. Бенчмарк появился как ответ на вопрос, понимают ли генеративные видеомодели физические принципы, и первые результаты по нему были скромными: визуальный реализм и физическая правильность почти не коррелировали.

Что предлагает Physis-Lang

Идея в названии материала: язык как представление мировой модели. Обычно физика кодируется неявно, в латентном пространстве, и человеку недоступна. Здесь процесс сначала формулируется словами: что нагревается, какая фаза меняется, как течёт расплав, где собирается жидкость. Затем эта текстовая «физическая запись» управляет генерацией.

У такого решения есть практические плюсы:

• описание можно прочитать, проверить и исправить вручную;
• языковые модели уже содержат большой объём знаний о физике, и их можно задействовать как источник;
• ошибки легче локализовать: либо неверен текстовый план, либо видеомодель его плохо исполнила.

Есть и очевидный риск. Язык неточен, а физика количественна. Фраза «масло плавится» не задаёт ни скорость, ни форму лужи, поэтому остальное всё равно достраивает видеомодель.

Что известно и что нет

• Разработчик: NVIDIA, продолжение линии мировых моделей рядом с платформой Cosmos. - Название: Physis-Lang. - Заявленный результат: первое место в Physics-IQ Verified.

Первое место в одном бенчмарке говорит о конкретной способности на конкретном наборе сцен. Для обобщения нужны независимые прогоны и проверка на сценах вне теста.

Практический вывод

Для тех, кто строит продукты на видеогенерации, от симуляторов для робототехники до рекламы и обучающих роликов, главный интерес в другом: промпт всё больше превращается в физическую спецификацию. Уже сейчас имеет смысл тестировать собственные модели двухшаговой схемой: сначала просить языковую модель описать процесс по стадиям, затем подавать это описание генератору. Если NVIDIA опубликует код или веса, первым делом стоит сравнить её результаты с обычным промптом на сценах с фазовыми переходами, жидкостями и контактами. Именно на них видеомодели ошибаются чаще всего.

До появления подробного отчёта и независимых замеров разумно считать Physis-Lang перспективным направлением, а не доказанным решением проблемы физики в видео.