[bug] HD-полигон сравнивает разные моменты анимации и может принимать движение облаков за регрессию #71

New Issue

2026-10-29T21:12:38Z

chexit commented

2026-10-29 21:12:38 +00:00

🤖 Filed by Codex, AI-агент Владимира (chexit).

Ревью 6f3fc644bc5194311a86baba722bc340215306b7. Новый tools/hd_bench.py полезен, но его baseline/flicker-проверка пока не обеспечивает одинаковые входы рендера.

Что происходит

run_shot делает time set, weather clear, teleport, wait-ready и wall-clock sleep; затем снимает первый кадр, ждёт 0.5 секунды и снимает второй. Между ними мир и render animation продолжаются. Нет фиксированного tick/render timestamp, отключения daylight/weather progression, стабилизации существующего налёта/техники/мобов или одинаковой frame sequence накопления TAA.

В форке уже разные часы: HdFrame.water.y = self.started.elapsed()%600 для волн, clouds.w приходит из game/cloud time, dither зависит от номера кадра. Даже при одинаковых time set/позе два запуска и два снимка показывают разные воду, облака, тени и шум. compare_frames считает любую разницу каналов, а judge объявляет её flicker/regression. Разница может быть честной анимацией или длительностью прогрева, а не багом.

Полигон также наследует renderer env и значения по умолчанию графического профиля/размера окна, не фиксируя полностью воспроизводимый профиль и реальный engine binary SHA. В отчёте git_rev() — SHA мода, который не доказывает версию запускаемого --game бинарника.

Нужно

Разделить deterministic visual snapshots и live performance/motion tests. Для snapshots фиксировать simulation time, renderer time/wind, camera/scene seed, размер/профиль и последовательность прогрева/temporal reset; для мерцания исключать ожидаемое движение или использовать соответствующую motion-aware метрику. Performance оставить живым, но на сравнимом сценарии с устойчивым warm-up. Писать SHA engine/patch stamp/бинарника, параметры GPU, разрешение и профиль. Не делать freeze одних world ticks единственным решением: вода живёт wall clock.

Приёмка

Два независимых прогона одного бинарника дают baseline diff в пределах численного шума при воде/облаках/закате. Повторные кадры не помечают штатную анимацию как неисправность. Контрольное изменение шейдера действительно ловится; GPU-бюджет сравнивается в одном режиме. Статическое ревью сценария/часов, GPU-бенч в текущей среде не запускался.

🤖 Filed by Codex, AI-агент Владимира (chexit). Ревью `6f3fc644bc5194311a86baba722bc340215306b7`. Новый `tools/hd_bench.py` полезен, но его baseline/flicker-проверка пока не обеспечивает одинаковые входы рендера. ### Что происходит `run_shot` делает time set, weather clear, teleport, wait-ready и wall-clock sleep; затем снимает первый кадр, ждёт 0.5 секунды и снимает второй. Между ними мир и render animation продолжаются. Нет фиксированного tick/render timestamp, отключения daylight/weather progression, стабилизации существующего налёта/техники/мобов или одинаковой frame sequence накопления TAA. В форке уже разные часы: `HdFrame.water.y = self.started.elapsed()%600` для волн, `clouds.w` приходит из game/cloud time, dither зависит от номера кадра. Даже при одинаковых time set/позе два запуска и два снимка показывают разные воду, облака, тени и шум. `compare_frames` считает любую разницу каналов, а `judge` объявляет её flicker/regression. Разница может быть честной анимацией или длительностью прогрева, а не багом. Полигон также наследует renderer env и значения по умолчанию графического профиля/размера окна, не фиксируя полностью воспроизводимый профиль и реальный engine binary SHA. В отчёте `git_rev()` — SHA мода, который не доказывает версию запускаемого `--game` бинарника. ### Нужно Разделить deterministic visual snapshots и live performance/motion tests. Для snapshots фиксировать simulation time, renderer time/wind, camera/scene seed, размер/профиль и последовательность прогрева/temporal reset; для мерцания исключать ожидаемое движение или использовать соответствующую motion-aware метрику. Performance оставить живым, но на сравнимом сценарии с устойчивым warm-up. Писать SHA engine/patch stamp/бинарника, параметры GPU, разрешение и профиль. Не делать freeze одних world ticks единственным решением: вода живёт wall clock. ### Приёмка Два независимых прогона одного бинарника дают baseline diff в пределах численного шума при воде/облаках/закате. Повторные кадры не помечают штатную анимацию как неисправность. Контрольное изменение шейдера действительно ловится; GPU-бюджет сравнивается в одном режиме. Статическое ревью сценария/часов, GPU-бенч в текущей среде не запускался.

chexit added the type:bug priority:P2 area:rendering area:tooling labels 2026-10-29 21:12:38 +00:00

chexit commented

2026-10-29 23:53:45 +00:00

🤖 Agent: сделано в https://gitea.maoniao.team/chexit/airdef/commit/3ced60e (заморозка времени/погоды, несколько кадров, маска движения). Остаётся: вода и ветер идут от настенных часов в движке — точная повторяемость требует заморозки в рендере.

chexit closed this issue

2026-10-29 23:53:46 +00:00

chexit referenced this issue from a commit

2026-10-29 23:53:46 +00:00

hd_bench: time and weather frozen per shot, several stills per shot, moving pixels (water, clouds, leaves) kept out of the baseline score, warm-up, engine hash in the report (#71)

chexit referenced this issue

2026-10-30 09:56:47 +00:00

[bug] HD-бенч принимает сильное мерцание за анимацию и исключает его из проверок #82

Sign in to join this conversation.