验证
代码、文档、runner 和 benchmark facade 的发布门禁。
本页内容
介绍
验证证据应和改动 surface 成比例：足够小，可以本地运行；足够具体，可以抓到回归；对跳过的重型阶段要明确说明。
按变更类型选择证据
| 变更 | 最小证据 | 提升状态时的额外证据 |
|---|---|---|
| 只改文档 | npm run types:check、npm run build、受影响 route 返回 200 | 布局或交互变化需要浏览器截图。 |
| CLI 或 runner | 聚焦 test/eval_core 测试加代表性 evaluate 命令 | 如果输出契约变化，再跑 existing-results 和 model-mode runs。 |
| Model manifest | zoo model-show、zoo model-download --check-local | Clone、checkpoint、demo parity、runner parity、benchmark run。 |
| Model runtime integration | 仓内 runtime import、无机器本地 source checkout 依赖、带 backend_stage 的 runtime profile，以及聚焦回归 | Checkpoint-backed run 和一份 normalized benchmark scorecard。 |
| Benchmark manifest | zoo benchmark-show、preflight runtime --profile <benchmark-id> | Clone、dataset、official runtime、normalized scorecard。 |
| Benchmark runner | zoo benchmark-run --mode official-validation 或 --mode official-run | Official result import、official runtime 和 full-suite fairness gate。 |
| Suite 或 matrix | run --all-benchmarks --plan-only --json | 规划选中的 cells，然后用可运行 benchmark 路径验证 artifacts。 |
发布门禁
make lint
make compile-eval
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" python -m pytest test/eval_core -q
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval evaluate --results-path tmp/results.jsonl --output-dir tmp/worldfoundry_evaluate --json
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval zoo benchmarks --jsoncd docs/fumadocs
npm run types:check
npm run build
curl -I http://localhost:8013/docs
curl -I http://localhost:8013/zh/docsconda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval zoo model-show --model-id <model-id> --include-manifest --json
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval zoo model-download --model-id <model-id> --check-local --jsonconda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval zoo benchmark-show --benchmark-id <benchmark-id> --include-spec --json
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval zoo benchmarks --json
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval preflight runtime --profile <benchmark-id> --manifest worldfoundry/data/benchmarks/runtime_profiles/official/<benchmark-id>.yaml --output-dir tmp/preflight/runtime/<benchmark-id> --json
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval zoo benchmark-run --benchmark-id <benchmark-id> --mode official-validation --official-results-path <official_results.json> --generated-artifact-dir <generated_artifacts> --output-dir tmp/benchmark_zoo/official_validation/<benchmark-id> --json产物验收
| 产物 | 必需场景 | 通过标准 |
|---|---|---|
run_manifest.json | 任意 evaluation run | Command、ids、status、timestamps、counts 和 output paths 与 run 一致。 |
execution_plan.json | Runner 或 suite 变化 | Resolved model、benchmark、metrics 和 requests 是确定性的。 |
sample_ledger.jsonl | 部分失败 review | Failed/skipped samples 有可见原因。 |
metrics/summary.json | Metric 变化 | Aggregates、failed counts 和 metric keys 符合预期 schema。 |
scorecard.json | 可发布 evaluation evidence | Eligibility、leaderboard state、metrics 和 blockers 存在。 |
report.json | Model/benchmark validation | Stage status、command、repo/checkpoint/dataset refs 和 blockers 已记录。 |
suite_report.json | Suite 或 matrix 变化 | 每个选中 cell 都是 pass、fail 或 skipped，并带原因。 |
集成声明规则
integrated 只用于可 review 的已实现 support surface，不能只靠 source URL 或 plan 声明。对模型 runtime，模型架构或 runtime glue、启动路径、环境契约、checkpoint/input/output contract，以及最小真实推理证据，都必须能从仓库和声明资产中 review。对 benchmark，仓内 runner、official command、隔离 importer 或 official-result normalizer 只要 CLI 路径、artifact/data requirements 和 scorecard 输出都有证据，就可以是 integrated。
不要把 integrated 当成 leaderboard 同义词。Normalizer-only benchmark integration 必须保持 verification_status=normalizer_only 和 leaderboard_valid=false，直到完整 official scorer 或 judge 已运行，且具体 scorecard 证明 eligibility。
当前 World-Model 验证记录
以下记录是 2026-06-27 针对仓内 world-model runtime 的最新 bounded 证据。当前 Studio workspace 源码会把 diamond、dino-wm、leworldmodel、starwm 暴露为 world workload，并保留各自官方 demo 输入字段。隔离 7879 验证 workspace 已确认 /api/models 对四个条目都返回 curated official-demo 字段，且 /api/jobs 可以提交 plan_only，不再触发之前的 call_kwargs.plan_only schema error。Jobs studio-00001 到 studio-00004 均完成：diamond、leworldmodel、starwm 写出 ready 的仓内 runtime manifest，dino-wm 正确保持在缺 OSF 资产的 blocked 状态。
| Model id | 证据 | 当前 blocker |
|---|---|---|
diamond | 仓内官方 play stack 能解析本地 ${WORLDFOUNDRY_CKPT_DIR}/diamond；Pong bounded validation 加载 ALE 0.9，完成 1 step 初始化采样，进入官方控制循环，最后只因 90 秒 timeout 停止。 | 完整可视化/demo capture 仍需要一次有意的 recording run。 |
dino-wm | 仓内 infer.py 能在 worldfoundry-unified-cu128 构造官方 plan_wall.yaml 命令；模块预检通过。 | 缺 OSF checkpoint 结构 checkpoints/outputs/<model_name>/hydra.yaml、checkpoints/model_*.pth 和任务数据集。 |
leworldmodel | 仓内官方 eval wrapper 已在 worldfoundry-unified-cu128 跑通 PushT random-policy demo；bounded validation 同时覆盖 direct CLI 和 Studio workspace job 路径，使用本地 pusht_expert_train.h5、num_eval=1、eval_budget=25，写出 JSON metrics 和非空 25 帧 mp4 preview。 | 非 random policy 仍需要 policy checkpoint；官方 50-episode 完整 eval 仍属于更长验证。 |
starwm | 仓内官方 offline inference client 能用 bundled StarCraft prompt fixture 构造 JSON/JSONL 推理命令。 | 需要运行中的 OpenAI-compatible endpoint，并服务 StarWM checkpoint。 |
当前 Video-Worldmodel 验证记录
2026-06-27 Studio 7870 批量验证证据
下面这批任务均通过 7870 Workspace 的 /api/jobs 提交，按“一张 GPU 一个 job”并行运行。它们补充的是仓内 Studio 路径和各模型 profile 中官方 demo 输入的发布证据；不替代完整 benchmark scoring。
| Model id | Job | Artifact 证据 | 视觉 QA |
|---|---|---|---|
worldcam | studio-00122，cuda:0 | worldcam.mp4，sha256 43397270aed80baf6a3261972b9f474f6233fdf9860619ea77e50a36a795084c，233 个非空 832x480 帧，平均相邻帧差 14.9166。 | 工业第一人称 conditioning 场景保持连贯，并有连续相机运动。 |
matrix-game-2 | studio-00123，cuda:1 | matrix-game-2.mp4，sha256 b324a86229da9d5803578c214560f47013c4104189bf37481de7d7423b3c1abc，597 个非空 640x352 帧，平均相邻帧差 19.3228。 | 官方 universal demo 呈现雪地户外导航和明显 world motion。 |
matrix-game-3 | studio-00124，cuda:2 | test.mp4，sha256 81c5c5eca9a725cf785a1db53d6a7994f3cc0fa7b4f383c0b97b5eb63b00071a，497 个非空 1280x704 帧，平均相邻帧差 24.1725。 | 城市街道 / 加油站场景在多段运动中保持连贯。 |
hunyuan-world-voyager | studio-00125，cuda:3 | hunyuan-world-voyager.mp4，sha256 57bc7a055c38cfd048c54f1db425d93ebe712b9131adf506dd86461e025a818e，45 个非空 768x1024 帧，平均相邻帧差 6.4688。 | 上半部分 RGB 画面符合官方茅草屋村庄 prompt；下半部分是仓内 Voyager pipeline 预期拼接的 depth preview。 |
videocrafter2_t2v | studio-00126，cuda:4 | videocrafter2-t2v.mp4，sha256 9209588eaa2b06fd2a48549f81c8772676721c42d4dd81c3576899ebf5030af7，16 个非空 512x320 帧，平均相邻帧差 4.3232。 | 未来城市 prompt 可见，视频稳定。 |
wan2.1_t2v | studio-00127，cuda:5 | wan2-1-t2v.mp4，sha256 f42dff9e99d190b5274fabd4ed08ee923e582c0ea3df6931f349b04a8863dac4，81 个非空 832x480 帧，平均相邻帧差 9.0117。 | 仓内 Wan2.1 T2V Studio 路径生成了连贯的机器人/走廊场景。 |
cogvideox-5b-i2v | studio-00128，cuda:6 | cogvideox-5b-i2v.mp4，sha256 ca332d8b3ba28b0c46ef527ec1e937b6863da197ddf9ad2263956a82306d9b18，49 个非空 720x480 帧，平均相邻帧差 2.8895。 | 骑龙/城堡 reference scene 被保留；运动幅度较小，但稳定并符合 prompt。 |
neoverse | studio-00129，cuda:7 | neoverse.mp4，sha256 4bbdc53eecc0f76029f075c9d8e15fe25e61f1ad3016356e6f356c08269f6c04，81 个非空 560x336 帧，平均相邻帧差 11.8459。 | 机械臂桌面装配场景和相机运动符合已接受的官方 video-input 路径。 |
2026-06-27 追加 Studio 路径验证
后续 studio-00130 到 studio-00145 继续通过同一个 7870 Workspace API 覆盖更多仓内 video runner。Contact sheet 和统计结果保存在 tmp/worldfoundry_studio/validation_batch_00130_00137_video_stats.json、tmp/worldfoundry_studio/validation_batch_00138_partial_video_stats.json 和 tmp/worldfoundry_studio/validation_batch_00139_00140_video_stats.json。
| Model id | Job | 证据摘要 | 发布处理 |
|---|---|---|---|
videocrafter1_i2v | studio-00130 | 16 个非空 512x320 帧，sha256 479345c0bcbecf08e6d919d832497ff048e76592ee31250338994a4d4ffb7e13，平均相邻帧差 19.8167；contact sheet 是有运动的马场景。 | Studio 路径视觉验证通过。 |
videocrafter1_t2v | studio-00131 | 16 个非空 1024x576 帧，sha256 cbecd6edaf8721445ea84310e6a699224f19f3fc8a6e24b4cfb6f28e9cd38a39，平均相邻帧差 22.4227；contact sheet 是符合 prompt 的森林老虎。 | Studio 路径视觉验证通过。 |
cogvideox_2b_t2v | studio-00132 | 17 个非空 720x480 帧，sha256 07069f3e82806e3c8666725c8b6a7f69eb66fc73acee48412df02ef418891cbb，平均相邻帧差 6.3231；contact sheet 符合 neon robot alley prompt。 | Studio 路径视觉验证通过。 |
cogvideox_5b_t2v | studio-00133 | 17 个非空 720x480 帧，sha256 e6773de3f61c3ba8bd27c2b3f5b2b53a0ab030634e90e48f35d34092bfb9947d，平均相邻帧差 5.3017；contact sheet 符合 rover desert prompt。 | Studio 路径视觉验证通过。 |
dynamicrafter_512_i2v | studio-00134 | 50 个非空 512x320 帧，sha256 46c726a338aa17c90345f46bebdc03c7f56e348ede3976c758d8ffc7bbe9c8c2，平均相邻帧差 4.4835；reference scene 保持连贯。 | Studio 路径视觉验证通过。 |
i2vgen-xl | studio-00135 | 16 个非空 512x320 帧，sha256 60441c2dad89bb69ff3e75ea5b9a4b71b5920c49f1b482fee731381399880fdf，平均相邻帧差 13.4487；reference scene 保持连贯。 | Studio 路径视觉验证通过。 |
easyanimate_i2v | studio-00136 | 49 个非空 672x384 帧，sha256 fc9486ecec1abc41d758a0c4ca5a22d3d0b908bb2e7c3f0ff88be0790eeb6179，平均相邻帧差 25.9258；contact sheet 显示 jungle/castle 运动连贯。 | Studio 路径视觉验证通过。 |
ltx_video_i2v | studio-00138 | 骑龙/城堡重跑生成 89 个非空 832x480 帧，sha256 d6ef1a701e4c909252769947cc0c312e3de86d50adb6cc4de3fc3b37f0efa6ce，平均相邻帧差 5.8207。早先企鹅 run studio-00137 语义清楚但几乎静止，平均帧差 0.3002。 | 只把骑龙/城堡重跑计为 route validation；企鹅 run 不作为 motion-quality evidence。 |
framepack | studio-00139 | 37 个非空 832x480 帧，sha256 e750e37a3b2acbc7ba417d43c57038b73370ad6198b5b162abe329afb9b6fafd，平均相邻帧差 9.1178；contact sheet 保留 reference world 并有运动。 | Studio 路径视觉验证通过。 |
krea-realtime-video | studio-00140 | 6 个非空 832x480 帧，sha256 e374184476a98787881fd02220f8f7a1b163377253ea09bfb6b4296ca018ef16，平均相邻帧差 6.9887；contact sheet 符合 art-gallery prompt。 | Route 已验证；更长官方 realtime-video parity 另行验证。 |
mochi-1-preview-t2v | studio-00142 | 13 个非空 848x480 帧，sha256 1abe8e49a55107d871e9641278d22764d72fb9806ea1902060e7b5ffaea7345f，平均相邻帧差 4.0757；greenhouse prompt 可见。 | Route 已验证；完整官方 preview 配置另行验证。 |
animatediff | studio-00143 | 8 个非空 448x256 帧，sha256 83f1e91258c69b0e2e4434853399eb43b256ff4c4bde56b65202395cbd57d182，平均相邻帧差 9.3120；灯笼街市 prompt 可见。 | Studio 路径视觉验证通过。 |
zeroscope | studio-00144 | 8 个非空 448x256 帧，sha256 61d405f6a6808e2fef78f96a87a8b83e9247525dbc976bf43d6369bcbed5a852，平均相邻帧差 3.3107；rover/desert prompt 可见。 | Studio 路径视觉验证通过。 |
longcat-video | studio-00141 | 18 个非空 1280x704 帧，sha256 a9e8bc553ce2671c3affcc97ac1a2a7e6ff03931c3d4af4ab211e785f1ca7456，平均相邻帧差 4.7008；输出是清晰 city/waterfront 场景，但运动和 prompt specificity 偏弱。 | 只计 route verified；本 run 不提升为 visual-demo parity。 |
modelscope-t2v | studio-00145 | 16 个非空 256x256 帧，sha256 365270db62ab2dbd1eea4c8f2753b930d4ad53fdd2b374bac74636808f90a695，平均相邻帧差 9.8974；contact sheet 未匹配 panda prompt。 | 不接受为视觉 QA 证据；既有已接受证据单独保留。 |
| Model id | 证据 | 当前 blocker |
|---|---|---|
longvie-1 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；使用默认 5 帧 640x352 dense/sparse control-video demo、本地 LongVie2 control checkpoint、Wan2.1 I2V 14B base 和 Wan2.1 T2V tokenizer。生成的 longvie-1.mp4 有 5 个非空帧，preview 人工检查符合 jungle-to-castle prompt。 | 官方长段设置仍需要更长验证。 |
longvie-2 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；使用同一个 5 帧 demo 并加载本地 dit.safetensors，LongVie2Pipeline 生成非空 longvie-2.mp4 preview，画面符合 prompt。 | 官方长段设置和 distributed USP variants 仍需要更长验证。 |
matrix-game-1 | Studio workspace /api/jobs 已能在 worldfoundry-unified-cu128 调到仓内 official Matrix-Game-1 runner。隔离 7878 workspace 的 job studio-00005 将 Studio image path 映射到 image_path，使用 video_length=17、inference_steps=50、max_images=1、max_conditions=1、bf16 和 1280x720 输出，生成 matrix-game-1.mp4，sha256 为 632c447bf4e4f9874f10d5f27183fa2b98a7265741897b13427016869a2e9285；artifact 解码为 17 个非空 1280x720 帧，平均相邻帧差 19.4847。 | 这只是 integration validation 证据。通用 Studio image 的输出噪声重，没有通过视觉 QA。公开官方 repo 的 run_inference.sh 指向 initial_image/，但上游没有提交该 fixture；65-frame 官方默认配置也在统一环境的单张 A100 80GB 上 OOM。因此 Matrix-Game-1 仍保持 official-demo visual parity pending。 |
matrix-game-2 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通官方 universal image-conditioned demo：worldfoundry/data/test_cases/matrix-game-2/universal/0000.png、worldfoundry/data/test_cases/matrix-game-2/configs/inference_universal.yaml、num_frames=150、fps=12、seed=42、size=[352, 640]、official_bench_actions=true。Studio job studio-00002 生成 matrix-game-2.mp4，包含 597 个非空 640x352 帧、12 fps、49.75 秒；docs demo asset /demos/studio/matrix-game-2-official-universal.mp4 来自该 run。bounded validation job studio-00001 也已通过，输出 57 帧。 | 这是 demo-parity inference 验证，不等同完整 benchmark scoring。官方随机轨迹可能进入偏暗或遮挡视角，因此视觉 QA 检查运动和连贯性，而不是要求每一帧亮度一致。 |
matrix-game-3 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通官方 cityscape image-conditioned demo：worldfoundry/data/test_cases/matrix-game-3/001/image.png，prompt A colorful, animated cityscape with a gas station and various buildings.，actions 为 forward + camera_r，num_iterations=12、num_inference_steps=3、size=704*1280、use_int8=true、compile_vae=true、vae_type=mg_lightvae，并使用本地 ${WORLDFOUNDRY_CKPT_DIR}/Matrix-Game-3.0。Studio job studio-00002 生成 test.mp4，包含 497 个非空 1280x704 帧、17 fps、明显 city-street world motion；docs demo asset 是 /demos/studio/matrix-game-3-cityscape.mp4。后续短 validation studio-00003 验证修复后的 Dynamo alias patch，在 compile_vae=true 时不再出现 _ConfigEntry TypeError/AttributeError 日志刷屏。 | 这是 demo-parity inference 验证，不等同完整 benchmark scoring。在 A100 验证主机上 fa_version=3 会请求 FA3，但实际回落到 FA2。 |
hunyuan-world-voyager | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通官方 README case1 conditioned-video demo：worldfoundry/data/test_cases/hunyuan_world_voyager/case1，prompt 为 An old-fashioned European village with thatched roofs on the houses.，num_frames=49、infer_steps=50、flow_shift=7.0、embedded_cfg_scale=6.0、seed=0、i2v_stability=true、ulysses_degree=1、ring_degree=1。Studio job studio-00003 生成 hunyuan-world-voyager.mp4，sha256 为 2b584900d6049948d4f68bda208333240d10e4bc97dc770bc6890c7aeeabf081；artifact 解码为 45 个非空 1024x768 帧、16 fps，人工抽帧符合欧洲茅草屋村庄 prompt，并保持预期的 RGB+depth preview。docs demo asset 是 /demos/studio/hunyuan-world-voyager-case1.mp4。 | 这是官方 demo 推理验证，不等同完整 benchmark scoring。官方 case1 命令默认单卡；xDiT 多卡是可选加速路径。 |
hunyuan-worldplay | Studio workspace /api/jobs actual inference 已在 worldfoundry-unified-cu128 按 official-image-pose-video task 和官方 8-rank 启动配置跑通：torchrun_nproc_per_node=8、num_frames=125、fps=24、user_height=480、user_width=832、num_inference_steps=4、few_step=true、prompt_rewrite=false、return_pre_sr_video=false、model_type=ar、output_type=pt、interaction w-31、seed=1。验证产物 sha256 为 392011407c3f706259d8e0d03d55960bbdc9be3d92fd8088fd8a4716b790dfda；artifact 解码为 125 个非空 832x480 帧，平均相邻帧差 6.069641984278156。视觉 QA 显示 stone path / bridge / lake world 场景连贯，并有连续相机运动。修复分布式 Studio 结果物化后复跑得到同一 sha256，并且 8 个 rank 只共享一个 run directory。 | 这验证仓内 8 卡 Studio/API demo 路径；完整 benchmark scoring 和更长 interaction suite 另行处理。 |
hunyuan-game-craft | Studio workspace /api/jobs actual inference 已于 2026-06-28 在专用 HYGameCraft conda profile 中通过仓内 runtime 跑通。Job studio-00024 使用 Studio task profile 暴露的官方 village interactive-video 配方：torchrun_nproc_per_node=8、seed 250160、prompt A charming medieval village with cobblestone streets, thatched-roof houses, and vibrant flower gardens under a bright blue sky.、输入 worldfoundry/data/test_cases/hunyuan_game_craft/village.png、actions forward,backward,right,left、interaction_speed=[0.2,0.2,0.2,0.2]、size=[704,1216]、num_frames=129、infer_steps=50、cfg_scale=2.0。本次 run 生成 hunyuan-game-craft.mp4，sha256 为 d8b9ccab1d0e9ead19f425b6618748655320803e9146621253cde08c8610beec；artifact 解码为 132 个非空 1216x704 帧、16 fps，平均相邻帧差 12.034740705339289。视觉 QA 显示符合预期的中世纪村庄 world，并有连续相机/action 运动。 | 这验证 8-rank Studio/API 路径和分布式结果物化路径；完整 benchmark scoring 与更长 interaction suite 另行处理。 |
neoverse | 修复 core spec 的官方 video-path 默认后，Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通。被接受的 patched-workspace job studio-00003 使用仓内 robot video、prompt A two-arm robot assembles parts in front of a table.、predefined_trajectory=tilt_up、num_frames=81、trajectory_mode=relative、angle=15、seed=42、use_first_frame=true、static_scene=false、num_inference_steps=4、cfg_scale=1.0。生成的 neoverse.mp4 sha256 为 4bbdc53eecc0f76029f075c9d8e15fe25e61f1ad3016356e6f356c08269f6c04；artifact 解码为 81 个非空 560x336 帧，视觉上是机械臂桌面装配场景并有相机运动。 | 早先 static_scene=true 的 run 不算 parity evidence。 |
yume | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通两个仓内 YUME 变体。YUME I2V job studio-00002 使用 size=544*960、interactions forward + camera_l、50 Euler steps，生成 yume.mp4，sha256 为 ca3a42231c2f3190f2d6ed3b9ba42f572df5f810b9e0f1ebc857a3b208cb87ac；artifact 解码为 64 个非空 960x544 帧、16 fps，平均相邻帧差 7.6733。YUME-1.5 job studio-00006 使用 size=704*1280、interactions forward、left、camera_r，生成 yume-1p5.mp4，sha256 为 3a2259f72931b889ca2c8e37c400a296909970bdc5031b828a37fce858ea9da2；artifact 解码为 87 个非空 1280x704 帧、16 fps，平均相邻帧差 12.4033。公开 docs asset /demos/studio/yume-1p5-jungle-castle.mp4 来自后续 7870 Workspace run，sha256 为 350249e32c50a8b0b3418c0fb459add75ecd3468eeb543c56747b7b57cee39d0，87 帧、1280x704、16 fps，平均相邻帧差 18.3252。视觉 QA 显示两个第一人称 jungle/castle world 连贯且有连续相机运动。 | 这是两个 YUME 变体的 Studio/API demo 推理验证，不是完整 benchmark scoring。 |
lyra-2 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通官方 ZoomGS single-image forward navigation demo：worldfoundry/data/test_cases/lyra/Lyra-2/00.png、action forward、fps=16、resolution=[480, 832]、seed=1、reconstruct_3d=false，并使用本地 ${WORLDFOUNDRY_HFD_ROOT}/nvidia--Lyra-2.0 资产。Studio job studio-00015 生成 lyra-2.mp4，sha256 为 8ace9ab06422f1fbafafc2945611e7266ccbf9d6512f603ba245b855773b6f4b；artifact 解码为 81 个非空 832x480 帧、16 fps。视觉 QA 显示稳定的 harbor/ship world，并有细微连续 forward camera motion，不是空视频或完全静帧。 | 提升 Lyra-2 变体；Lyra-1 的独立证据见下一行。 |
lyra-1 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通官方 Lyra-1 static single-image SDG demo：worldfoundry/data/test_cases/lyra/Lyra-1/00172.png、mode=static、trajectory=zoom_in、camera_rotation=center_facing、num_video_frames=121、height=704、width=1280、fps=24、num_steps=35、guidance=1.0、seed=1。Studio job studio-00005 生成 lyra-1.mp4，sha256 为 4d03b5d457bcc9f34f48e395128c21de985cfcd5ea96c971eec43915bc9d7f27；artifact 解码为 121 个非空 1280x704 帧、24 fps，平均相邻帧差为 3.899765184190538。视觉 QA 显示稳定的彩色玻璃阳光室内 world，并有连续相机运动。 | 提升 Lyra-1 变体；完整 benchmark scoring 另行验证。 |
lingbot-world | Studio workspace /api/jobs actual inference 已于 2026-06-26 在专用 lingbot-world conda 环境中跑通 base-cam checkpoint robbyant/lingbot-world-base-cam：worldfoundry/data/test_cases/lingbot_world/00/image.jpg、action path worldfoundry/data/test_cases/lingbot_world/00、interactions forward,left,right,camera_l,camera_r、num_frames=161、sampling_steps=70、max_area=399360、seed=42。Studio job studio-00007 生成 lingbot-world.mp4，sha256 为 1956dc6ca47cdcc3023b9a8b424f687726f559dffedae6c682a2b57d75e5e86b；artifact 解码为 161 个非空 832x464 帧、16 fps，平均相邻帧差为 13.532635980844498。视觉 QA 显示连贯的第一人称骑龙穿越 fantasy jungle/castle world，并有连续相机运动。 | 只提升 base-cam 变体；base-act 和 fast 仍需官方 checkpoint 验证。 |
vmem | Studio workspace /api/jobs actual inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通仓内 VMem runtime；使用本地 ${WORLDFOUNDRY_CKPT_DIR}/vmem 和 ${WORLDFOUNDRY_CKPT_DIR}/cut3r 资产、输入 worldfoundry/data/test_cases/studio_demo/00/image.jpg、interaction forward、官方配置 height=576、width=576、inference_num_steps=50、seed=42。Studio job studio-00118 生成 vmem.mp4，sha256 为 7a9f29527a222e3b09d8db5f78a42bf8cf4339a0b7bb7f0efa20b24f93da5c6e；artifact 解码为 6 个非空 576x576 帧，平均相邻帧差 15.2285。视觉 QA 显示第一人称 jungle/castle 场景被保留，并有连续 forward camera motion。 | 这验证仓内 Studio/API VMem 路径；更长多轮交互 suite 和 benchmark scoring 另行处理。 |
worldcam | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通仓内 WorldCam CS industrial conditioning video、intrinsics/extrinsics arrays、conditioning_frames=65、num_ar_steps=50、num_inference_steps=50、cfg_scale=4、seed=0、height=480、width=832、fps=30。Studio job studio-00004 生成 worldcam.mp4，sha256 为 78b3863500638d4227c3a4b4a052155f8bc08583b0523ab3da7a6d3527f66f85；artifact 解码为 233 个非空 832x480 帧，人工抽帧保持工业第一人称场景。 | 这是 official-style demo inference 验证，不等同完整 benchmark scoring。 |
wow | Workspace CLI actual inference 已于 2026-07-01 在 worldfoundry-unified-cu128 通过仓内 WoWPipeline 跑通官方 Wan 14B 600k 默认变体 WoW-world-model/WoW-1-Wan-14B-600k。该 run 使用 worldfoundry/data/test_cases/test_vla_image_case1/init_frame.png、prompt The Franka robot grasps the red bottle on the table.、steps=50、seed=42、num_frames=41、no_tiled=false、enable_vram_management=true、persistent_param_gb=70。生成的 wow.mp4 sha256 为 a0a49bea07b51770473a155e709ba48513c1e0ca5e4638bd1c2bc7eaa026ef9e；artifact 解码为 41 个非空 832x480 帧、16 fps，平均相邻帧差 6.556299558460202。0/20/40 帧人工 QA 显示机器人和红色瓶子桌面场景连贯，并有连续运动。 | 这提升 WoW 官方 Wan 14B Workspace route；WoW DiT 2B 是独立 backend，需要单独 checkpoint validation。 |
gen3c | Workspace CLI actual inference 已于 2026-07-01 在专用 gen3c conda profile 中通过仓内 Cosmos Predict1 GEN3C runtime 跑通，不依赖外部 GEN3C checkout。该 run 使用官方 single-image demo fixture worldfoundry/data/test_cases/gen3c/image.png、trajectory=left、camera_rotation=center_facing、movement_distance=0.3、num_video_frames=121、height=704、width=1280、fps=24、num_steps=35、guidance=1.0、seed=1、num_gpus=8、foreground_masking=true，并关闭 prompt upsampler/guardrail/prompt encoder，使用本地 nvidia/GEN3C-Cosmos-7B 资产和 Ruicheng/moge-vitl。生成的 gen3c.mp4 sha256 为 29dfcd6f8ac26c59ef49a9a7c5bfd12a8470990cc751ce3ed17e715692a81233；artifact 解码为 121 个非空 1280x704 帧、24 fps，平均相邻帧差 5.119590534248738。0/30/60/90/120 帧人工 QA 显示符合预期的未来城市场景和连续 left camera motion。 | 这验证官方 8 卡 Workspace route。首次运行较慢是因为 27GB Cosmos checkpoint 和 Warp kernels 需要在所有 rank 初始化后才进入采样。 |
cameractrl | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通官方 CameraCtrl pose file 0f47577ab3441480.txt、mountain-lake prompt、num_frames=16、fps=8、height=256、width=384、num_inference_steps=25、guidance_scale=14.0、seed=42。Studio job studio-00008 生成 cameractrl.mp4，sha256 为 47e3b2de059e3b2321f3e56f0655b9ffb897524c605d63fa46d8d6277dd5ee64；artifact 解码为 16 个非空帧，视觉上符合 prompt 且有连续相机运动。 | 这只验证 CameraCtrl trajectory-video Studio 路径；MotionCtrl 不因这一行被提升。 |
dualcamctrl | 2026-06-30 已在 worldfoundry-unified-cu128 通过仓内 DualCamCtrl runtime 跑通完整官方参数推理。该 run 使用 worldfoundry/data/test_cases/dualcamctrl/demo_pic 下的 official seaside RGB/depth/camera fixture，参数为 num_frames=61、height=320、width=480、num_inference_steps=50、fps=10、seed=42，资产来自 FayeHongfeiZhang/DualCamCtrl、alibaba-pai/Wan2.1-Fun-V1.1-1.3B-Control-Camera、Wan-AI/Wan2.1-T2V-1.3B 和 Wan-AI/Wan2.1-I2V-14B-480P。生成的 outputs/dualcamctrl/seaside_official.mp4 sha256 为 2ede70047a67e04e1e22ad0449d151f07b0b1dd66e22451c273867fbf592cea4，解码为 61 个非空 320x480 帧。随后又用 workspace_job infer 做了 9 帧 / 2 step CLI 路径回归，确认能经过 Studio conda dispatch 写出 tmp/worldfoundry_infer/dualcamctrl/short_cli.mp4，sha256 为 30292ed99f552a651517a472903b534d67a4b6c652c666fcca1008295c7f0c07。 | 61 帧 / 50 step run 是 demo-parity 证据；9 帧 / 2 step CLI run 只验证提交路径，不作为发布 demo。 |
motionctrl | Studio workspace /api/jobs actual inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通；使用仓内 MotionCtrl runtime、本地 TencentARC/MotionCtrl 资产、默认 camera/object-motion fixture、num_frames=16、height=256、width=256、num_inference_steps=50、seed 20230211。隔离 7878 workspace 中，Studio job studio-00007 生成 motionctrl.mp4，sha256 为 12aee3f92d2d61bfc249ecc9fedea91b07c516115c5c80e9154404f3b5392b79；artifact 解码为 16 个非空 256x256 帧，平均相邻帧差 31.4121。视觉 QA 显示从室内到室外的 camera/object motion 连贯，不是空视频或静帧。 | 这验证有界 MotionCtrl Studio/API 路径；完整官方 fixture parity 和 benchmark scoring 另行处理。 |
self-forcing | 将默认 runtime root 从外部 github_repos 切到仓内 infer-only runtime worldfoundry/synthesis/visual_generation/forcing/self_forcing_runtime，并移除裁剪 runtime 中残留的 training import 后，Studio workspace /api/jobs actual inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通。Job studio-00018 使用官方 self_forcing_dmd.yaml 路径、本地 ${WORLDFOUNDRY_CKPT_DIR}/Self-Forcing/checkpoints/self_forcing_dmd.pt、本地 Wan2.1 base weights、prompt A cinematic shot of a red sports car driving along a coastal highway at sunset, with realistic motion, rich detail, and stable lighting.、num_output_frames=21、num_samples=1、use_ema=true、save_with_index=true、fps=16 和 seed=0，生成 self-forcing.mp4，sha256 为 51072c63b4f7fb7a8560ff7b617044e88883dcf3a1892fb843617bb9bdf3cfdc。artifact 解码为 81 个非空 832x480 帧，平均相邻帧差 3.8222318417801815；视觉 QA 显示红色跑车沿海高速日落场景连贯。 | 这是有界 Studio/API validation 证据；完整官方 benchmark parity 仍待验证。 |
causal-forcing | 将默认 runtime root 从外部 github_repos 切到仓内 infer-only runtime worldfoundry/synthesis/visual_generation/forcing/causal_forcing_runtime，并移除裁剪 runtime 中残留的 training import 后，Studio workspace /api/jobs actual inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通。Job studio-00019 使用官方 chunk-wise DMD config、本地 ${WORLDFOUNDRY_CKPT_DIR}/Causal-Forcing/chunkwise/causal_forcing.pt、本地 Wan2.1 base weights、prompt A cinematic shot of a futuristic train crossing a mountain valley under dramatic clouds, with coherent motion and high visual detail.、num_output_frames=21、fps=16 和 seed=0，生成 causal-forcing.mp4，sha256 为 9172cfa7622075062cecd345f02a472a19f80bb0370061a632b2b8385dba90b2。artifact 解码为 81 个非空 832x480 帧，平均相邻帧差 11.497396240234375；视觉 QA 显示未来列车穿越山谷场景连贯。 | 这是有界 Studio/API validation 证据；完整官方 benchmark parity 仍待验证。 |
cogvideox-2b-t2v | Studio workspace /api/jobs inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通仓内 Diffusers CogVideoX runtime，prompt 为 A futuristic city street at sunset with reflective glass towers, clean motion, and cinematic lighting.，参数为 num_frames=17、height=480、width=720、num_inference_steps=10、fps=8、seed=42。重启后的 7875 workspace 中，Studio job studio-00002 生成 cogvideox-2b-t2v.mp4，sha256 为 085fa33b0e623473f0b098c2a51f45497d88fd8e7c79a4bb7d94a74da03ee20e；artifact 解码为 17 个非空 720x480 帧、8 fps，平均相邻帧差 8.75875，视觉 QA 显示连贯的未来城市街景视频。workspace 日志显示 denoising progress bar 从 0/10 跑到 10/10。 | 验证 CogVideoX 2B T2V Studio/API demo 路径。 |
cogvideox-5b-t2v | Studio workspace /api/jobs inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通仓内 Diffusers CogVideoX runtime，使用同一个未来城市 prompt，参数为 num_frames=17、height=480、width=720、num_inference_steps=10、fps=8、seed=43。7875 workspace 中，Studio job studio-00001 生成 cogvideox-5b-t2v.mp4，sha256 为 ed7d76710d13bbe3c683c7dd1212a595e1dd1d86075ebf317a8f0c390c9d375e；artifact 解码为 17 个非空 720x480 帧、8 fps，平均相邻帧差 4.91821，视觉 QA 显示稳定连贯的未来城市街景和轻微前进运动。workspace 日志显示 denoising progress bar 从 0/10 跑到 10/10。 | 验证 CogVideoX 5B T2V Studio/API demo 路径。 |
cogvideox-5b-i2v | Studio workspace /api/jobs inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通仓内 Diffusers CogVideoX image-to-video runtime，输入图为 worldfoundry/data/test_cases/studio_demo/00/image.jpg，prompt 为 First-person cinematic flight on a dragon through a lush jungle toward a towering ancient stone castle, with smooth forward camera motion, detailed fantasy world, natural lighting.，参数为 num_frames=49、height=480、width=720、num_inference_steps=50、guidance_scale=6.0、fps=8、seed=45。7875 workspace 中，Studio job studio-00003 生成 cogvideox-5b-i2v.mp4，sha256 为 c4e452afa4007fce7651f0211f90831293e7d726c31812c6ed8628369024ca50；artifact 解码为 49 个非空 720x480 帧、8 fps，平均相邻帧差 3.7543341368436813。视觉 QA 显示稳定的第一人称骑龙/城堡 image-conditioned video，没有被拒绝的 10-step mismatch validation 中出现的纹理网格退化。workspace 日志显示 denoising progress bar 从 0/50 跑到 50/50。 | 验证 CogVideoX 5B I2V Studio/API demo 路径。 |
i2vgen-xl | Studio workspace /api/jobs validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；使用本地 ${WORLDFOUNDRY_CKPT_DIR}/i2vgen-xl、输入 worldfoundry/data/test_cases/studio_demo/00/image.jpg、第一人称骑龙/城堡 prompt、num_frames=16、height=320、width=512、num_inference_steps=8、fps=8、seed=101。7876 workspace 中，Studio job studio-00001 生成 i2vgen-xl.mp4，sha256 为 6a18c79e11fd0a539b224e52a98f8ee370a10da4812875c18f35d15f693bf8e6；artifact 解码为 16 个非空 512x320 帧，平均相邻帧差 33.44407691955566。视觉 QA 显示非空 image-conditioned 骑龙/城堡片段。 | 这是短 Studio validation，不等同官方长配置 parity。 |
dynamicrafter_512_i2v | Studio workspace /api/jobs validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；使用本地 ${WORLDFOUNDRY_CKPT_DIR}/DynamiCrafter_512/model.ckpt、输入 worldfoundry/data/test_cases/studio_demo/00/image.jpg、第一人称骑龙/城堡 prompt，请求参数为 num_frames=16、height=320、width=512、num_inference_steps=8、fps=8、seed=102。7876 workspace 中，Studio job studio-00002 生成 dynamicrafter-512-i2v.mp4，sha256 为 0ffeb2d02884968d9b3418ec5fd5d1a579b0b084d3db2bf9a1c5a9cd0a46c55e；artifact 解码为 50 个非空 512x320 帧，平均相邻帧差 6.741266180057915。视觉 QA 显示稳定的 image-conditioned jungle/castle 片段和轻微连续运动。 | 只提升 512 I2V Studio validation；官方长配置 parity 仍待验证。 |
dynamicrafter_1024_i2v | Studio workspace /api/jobs validation 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通；使用本地 ${WORLDFOUNDRY_CKPT_DIR}/DynamiCrafter_1024/model.ckpt、输入 worldfoundry/data/test_cases/studio_demo/00/image.jpg、第一人称骑龙/城堡 prompt，请求参数为 frames=16、height=576、width=1024、steps=8、fps=8、seed=202。隔离 7878 workspace 中，Studio job studio-00008 生成 dynamicrafter-1024-i2v.mp4，sha256 为 d179d230a6017bbbabe820ab53a5e848b5ae2ffb2b0b65057b5db8f2e00311da；artifact 解码为 50 个非空 1024x576 帧，平均相邻帧差 11.9499。视觉 QA 显示稳定的 image-conditioned 骑龙/城堡片段，没有空帧或损坏帧。 | 只提升有界 1024 I2V Studio validation；官方长配置 parity 仍待验证。 |
easyanimate-i2v | 修复 V5.1 scheduler 默认值从 DDIM 改为官方 Flow、I2V checkpoint 改为 alibaba-pai/EasyAnimateV5.1-7b-zh-InP，并让 height/width 映射到 sample_size 后，Studio workspace /api/jobs bounded I2V validation 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通。Job studio-00015 使用本地 ${WORLDFOUNDRY_CKPT_DIR}/hfd/alibaba-pai--EasyAnimateV5.1-7b-zh-InP、输入 worldfoundry/data/test_cases/studio_demo/00/image.jpg、prompt A smooth cinematic camera move through a bright fantasy village with detailed buildings and stable motion.、num_frames=49、height=384、width=672、num_inference_steps=50、guidance_scale=6.0、fps=8、seed=206，生成 easyanimate-i2v.mp4，sha256 为 b02c2d0b4e00106c5a0af7d633fd3a9d6de12236c931b4d9c6071a0144bf2c20。artifact 解码为 49 个非空 672x384 帧，平均相邻帧差 14.83779218293582；视觉 QA 显示连贯的 jungle/castle world 和连续运动，不再是之前被拒绝的 DDIM 彩色噪声输出。 | 这是有界 Studio/API validation 证据；完整官方 benchmark parity 仍待验证。 |
allegro_ti2v | Studio workspace /api/jobs 已于 2026-06-27 在 7870 workspace 的 worldfoundry-unified-cu128 中再次通过 validation；使用本地 Allegro TI2V 资产、输入 worldfoundry/data/test_cases/studio_demo/00/image.jpg 和第一人称骑龙/城堡 prompt。Studio job studio-00149 生成 allegro-ti2v.mp4，sha256 为 adb3a757dd50cfd08599f8497d1968ac08e35c6b41231ed361b3bb5ae3983f7e；artifact 解码为 88 个非空 1280x720 帧、15 fps，平均相邻帧差 5.521631757363504。视觉 QA 显示连贯的骑龙/城堡片段，没有空帧或损坏帧。 | 这是 Studio validation 证据；完整官方质量 parity 独立处理。 |
wan2.2-ti2v-5b | Studio workspace /api/jobs 已于 2026-06-27 在 7870 workspace 的 worldfoundry-unified-cu128 中通过 validation；使用 Wan2.2 TI2V 5B 路径、官方 cats-boxing prompt、size=1280*704、seed=42 和 121 帧。Studio job studio-00157 生成 wan-2p2.mp4，sha256 为 08163a019968b626878177f774b9cd33b3c9881acd98f1ac81b95f11fcabd281；artifact 解码为 121 个非空 1280x704 帧、16 fps，平均相邻帧差 14.943336838230938。视觉 QA 显示两只拳击猫符合 prompt，拳击场几何稳定。 | 这验证 Studio 121 帧路线；完整上游 benchmark scoring 独立处理。 |
stable-virtual-camera | 修复 subprocess 输入路径物化后，Studio workspace /api/jobs validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通。Job studio-00010 使用 worldfoundry/data/test_cases/studio_demo/00/image.jpg、version=1.1、task=img2trajvid_s-prob、本地 ${WORLDFOUNDRY_CKPT_DIR}/stable-virtual-camera 和 modelv1.1.safetensors，生成 stable-virtual-camera.mp4，sha256 为 d14261ebe0c13c007c10eef1a5aa5d27d24df02f289c6c9eccf12e4fc7a4f075；artifact 解码为 13 个非空 512x320 帧、30 fps。 | 这验证了仓内 adapter 和路径处理；官方 gallery parity 仍待验证，公开用户还需要 gated checkpoint 访问权。 |
skyreels-v2 | Studio workspace job studio-00029 于 2026-06-27 通过视觉 QA；使用仓内 SkyReels-V2 route、本地 DF-1.3B 540P checkpoint、prompt A red sports car drives through a rainy neon city street, cinematic, sharp reflections.、num_frames=17、fps=8、num_inference_steps=8、height=540、width=960、seed=102。生成的 skyreels-v2.mp4 sha256 为 134db6fb54e72136a25f6102415aab20c6307066cb2b58b302d1118402f1513a，解码为 17 个非空 960x544 帧。 | 可作为有界 Studio/API 视觉 validation 通过证据。2026-06-26 的城市广场 run 仍记录为 prompt-specific 失败，不作为通过依据。 |
krea-realtime-video | 将 infer-only realtime-video runtime 迁入 worldfoundry/synthesis/visual_generation/krea_realtime/krea_runtime 并修复 FlashAttention fallback import 后，Studio workspace /api/jobs short validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通。Job studio-00013 使用 prompt A smooth cinematic flythrough of a bright modern art gallery with stable camera motion and realistic reflections.、num_blocks=1、height=480、width=832、fps=16、seed=42，生成 krea-realtime-video.mp4，sha256 为 9919d555679909ca998b262450a492f27b904ac4787381e4f91636e4a586a06a。artifact 解码为 6 个非空 832x480 帧，平均相邻帧差 5.34894437789917；视觉 QA 显示明亮现代画廊，与 prompt 对齐。 | 这是有界 Studio validation 证据；官方更长 realtime-video parity 仍待验证。 |
pusa-vidgen | 修复 Wan2.2 model-loader registry 后，Studio workspace /api/jobs validation 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通；该修复保持默认 wan_video_dit 路径不变，同时允许 Pusa runner 显式选择 WanModelPusa。Job studio-00121 使用本地 RaphaelLiu/Pusa-Wan2.2-V1、本地 Wan2.2-T2V-A14B、可选 LightX2V LoRA，prompt A cinematic shot of a small robot walking through a neon-lit street at night, smooth camera motion, detailed reflections.，mode=t2v，请求 num_frames=7 并由官方 runtime 自动补到 9，height=480、width=832、num_inference_steps=4、guidance_scale=1.0、lightx2v=true、seed=0。生成 pusa-vidgen.mp4，sha256 为 409ea30bdda88a589df6a486d4b7bfc51063a4df3b7a020299b4376b25addefd；artifact 解码为 9 个非空 832x480 帧，平均相邻帧差 4.498354434967041。视觉 QA 显示稳定的霓虹夜间街道、小机器人主体和湿地反射，符合 prompt。 | 这验证仓内 Pusa V1 Studio/API 路径，以及 WanModelPusa high/low DiT 集成；完整官方长配置 parity 仍待验证。 |
longcat-video | Studio workspace /api/jobs short T2V validation 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通；使用仓内 LongCat runtime 和本地 ${WORLDFOUNDRY_CKPT_DIR}/LongCat-Video。Job studio-00013 使用 prompt A cinematic wide shot of a bright futuristic city plaza with clean glass towers, people walking, and smooth camera motion.、height=256、width=448、num_frames=9、num_inference_steps=4、guidance_scale=4.0、fps=8、seed=42；refine 输出 output_t2v_refine.mp4 的 sha256 为 8de82f9472d6e5d64a5fee4c6b0a83471d21d0ebdd64a071602b5dcaed0f0572。artifact 解码为 18 个非空 1280x704 帧，平均相邻帧差 3.0606036670705214；视觉 QA 显示清晰的未来城市 skyline/plaza 和行人，没有空帧或噪声失败。 | 这是有界 Studio/API validation 证据；完整 93 帧 / 50 step 官方质量 parity 仍待验证。 |
sana-video-2b-480p | Studio workspace /api/jobs actual inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通；使用仓内 Sana Video runtime 和本地 ${WORLDFOUNDRY_CKPT_DIR}/SANA-Video_2B_480p/checkpoints/SANA_Video_2B_480p.pth。隔离 7879 workspace 的 job studio-00008 使用 prompt A red sports car driving down a sunny city street, cinematic video, sharp details.、step=20、num_frames=17、fps=16、seed=1234、cfg_scale=6.0 和 cuda:1，生成 sana_20step_17f_red_car.mp4，sha256 为 1e167e1117633f30321a5573663363ba7a93b6a6bee2a8071754d2b6df8500ee。artifact 解码为 17 个非空 832x480 帧、16 fps；视觉 QA 显示清晰红色跑车在阳光城市街道上行驶。 | 更早的 2-step job studio-00006 只记录为链路 validation，因为语义视觉 QA 未通过。完整 50 step / 更长帧数官方质量 parity 仍待验证。 |
framepack | 修复仓内 FramePack wrapper 将官方 generator 产物 materialize 到 Studio run 目录后，Studio workspace /api/jobs short I2V validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通。Job studio-00017 使用 worldfoundry/data/test_cases/studio_demo/00/image.jpg、第一人称 jungle/castle prompt、max_frames=17、num_sampling_steps=8、seed=42 和本地 FramePackI2V_HY checkpoint，生成 framepack.mp4，sha256 为 c5d4dfae92433550d1d009028702570e7bda610bdf649aa73b91f4f8f7251f48。artifact 解码为 37 个非空 832x480 帧，平均相邻帧差 6.693102518717448；视觉 QA 显示骑龙/城堡 reference scene 被保留并有轻微运动。 | 这是有界 Studio validation 证据；官方长视频 parity 仍待验证。 |
worldgen | 修复 Depth-Anything V2 checkpoint 解析并以 low_vram=false 提交后，Studio workspace /api/jobs 3D artifact validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通。Job studio-00011 使用 worldfoundry/data/test_cases/vggt/examples/kitchen/images、prompt a small furnished room，生成 worldgen.ply，sha256 为 39bb0b2daeaeea546dd98884a511db0b5ad5e249983674c766bf512cf111ad66。该 PLY 大小 142606753 bytes，binary little-endian，并声明 2097152 vertices。 | 这验证仓内 3D artifact 路线。旁路生成的极小 worldgen.mp4 不计为视频证据，完整场景质量 parity 仍待验证。 |
depth-anything-v2-prior | Studio/API job studio-00036 于 2026-06-27 在 worldfoundry-unified-cu128 验证了共享 Depth-Anything V2 image-depth 路径；使用 depth-anything/Depth-Anything-V2-Large、input_size=518 和 fixture worldfoundry/data/test_cases/images/000.png。输出 000_depth.png 的 sha256 为 1f6b8954602b60076f1c9a1abddebaa30e8f9a314628a261b2c7d8929b4568d0，是非空 706x529 RGB depth map，灰度 extrema 为 [1, 227]，stddev 为 32.63。 | 这验证 geometry priors 共享的 DA2 基础推理路径；下游 3D/world runtime 仍需要各自的 parity evidence。 |
vggt-omega | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 使用本地 facebook/VGGT-Omega 资产跑通，参数为 task_type=official、image_resolution=512、preprocess_mode=crop、video_sample_fps=1.0、max_points_k=200。Studio job studio-00010 生成 predictions.npz，sha256 为 370f36b23ac86d12bb204e8c737a00791fe600a4f8129d3bb2be9fadf130e5a2，以及 scene_conf20.0_blackFalse_whiteFalse_camTrue_skyFalse_max200k.glb，sha256 为 d1f2eed3ed6274a84e9ab7cc72e5001eabfdc92ccec5d9ced486c8ca96f84613；GLB header 和视觉检查均有效。 | 这是 3D scene-export 验证，不是 video-generation 证据。 |
flashworld | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 使用本地 FlashWorld 和 Wan2.2 资产跑通 image-conditioned camera-scene 默认配置：num_frames=16、fps=15、image_height=480、image_width=704、return_video=true。Studio job studio-00014 生成 flashworld.mp4，sha256 为 899063237ba8f2ce520cc2d392ca4cc25da643c172d2a78d6f5de3b92b351c17，以及 gaussians.ply，sha256 为 4a4895af88019cfc9daebba4d300d8aa74768f19243253160eed3c4a5cb1ac3e；mp4 解码为 226 个非空 704x480 帧，binary PLY 声明 2703360 vertices。 | 这验证 image-to-3D 和 preview 路径；完整 3D renderer scoring 独立处理。 |
recammaster | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通仓内 motorcycle video input、camera trajectory [100, 100, 0, 0, 30]、num_frames=81。Studio job studio-00011 生成 recammaster.mp4，sha256 为 55e1323b8c764f361c65b1b1945946d9bb4c2ebdb6f2806a7f297d43716cb7b5；artifact 解码为 81 个非空 832x480 帧，视觉上在相机运动下保持 motorcycle bridge/road 场景。 | 这是官方 camera-trajectory demo 验证，不等同完整 benchmark scoring。 |
worldfm | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通官方 worldfoundry/data/test_cases/worldfm/meta.json、fps=30、save_mode=video。Studio job studio-00012 生成 worldfm.mp4 和 worldfm_scene/output.mp4，sha256 都是 f9b158fc44c3287f08620e681f44702e31e88ac359c00fb035e5a26c4cb8987d；视频解码为 4 个非空 512x512 帧，worldfm_scene/panorama.png 为 1920x960。视觉 QA 确认 Mario-style indoor panorama 和视频帧一致。 | 官方 meta demo 本身较短；更长 scene sweep 属于单独验证。 |
warp-as-history | Studio workspace /api/jobs actual inference 已于 2026-06-26 在专用 warp-as-history conda 环境中跑通。该 run 使用仓内官方 BMX/graffiti first frame、warp video 和 visibility mask，prompt 为 A cyclist riding past a colorful graffiti wall beside trees and tall grass, urban BMX scene, with camera movement.，num_frames=33、fps=16、height=384、width=640、seed=42。Studio job studio-00016 生成 warp-as-history.mp4，sha256 为 cd8cff7babee370497a56d5cc0718f975b17bcf1eab1a9002262da502d21d25a；artifact 解码为 33 个非空 640x384 帧，视觉 QA 显示骑行者沿 graffiti wall 移动。 | 该模型因官方 torch/Python pin，明确使用专用 conda profile。 |
fantasyworld-wan21 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通仓内 Wan2.1 official camera-world 路径：bundled Studio demo image、worldfoundry/data/test_cases/fantasyworld/camera_forward.json、prompt A coherent fantasy harbor world with stable geometry during a forward camera move.、fps=16、seed=1024、using_scale=true、conf_threshold=1.0、stride=4。patched-workspace job studio-00004 生成 fantasyworld-wan21.mp4，sha256 为 5ff6d8f6723a7fa1950333a0c6d3d2c5ac3576710f9dd34e5a23581c06800044；artifact 解码为 81 个非空 592x336 帧、16 fps。同时输出 image/recon_confthresh1.0.ply，sha256 为 778436734adc6405077245eddedba96700257cebea7089d4caf559fe77cd924c，包含 1006992 vertices。视觉 QA 显示 fantasy jungle/castle 场景中的连续 forward camera motion。 | 只验证 Wan2.1 变体。Wan2.2 仍 pending，因为官方单卡 run 在 A100 80GB 上 OOM。 |
fantasyworld-wan22 | Studio workspace job studio-00018 于 2026-06-26 在 worldfoundry-unified-cu128 尝试仓内 Wan2.2 official camera-world 路径，使用本地 FantasyWorld、Wan2.2 Fun、LoRA 和 MoGe 资产。该 run 在模型 forward 阶段 CUDA OOM，单张 A100 显存占用接近 79GB。 | 未验证。需要按官方内存策略重跑，例如多卡/offload 或明确记录的低显存官方配置，通过后才能提升状态。 |
skyreels-v3 | Studio workspace /api/jobs actual inference 已于 2026-06-26 在构建好 flash-attn==2.8.3.post1 的 worldfoundry-unified-cu128 中跑通。该 run 通过仓内 runtime 内部 torchrun --nproc_per_node=8 走官方 USP 形状：task_type=reference_to_video、duration=5、resolution=720P、seed=42、use_usp=true，并使用仓内 Studio reference image。生成的 skyreels-v3.mp4 有 121 个非空 720p 帧、非零帧间运动，人工检查是有效的第一人称 jungle/castle preview。docs demo asset 是 /demos/studio/skyreels-v3-reference-to-video.mp4。 | Full benchmark scoring 独立于这个 demo-parity validation。USP 需要 flash-attn 和请求到的多卡资源。 |
wan2.1-vace | Studio workspace /api/jobs actual inference 已于 2026-06-28 通过 job studio-00178 按官方 VACE-14B command shape 跑通：8-rank torchrun、1280x720、81 帧、50 sampling steps、DiT/T5 FSDP、Ulysses size 8、ring size 1、本地 Wan2.1-VACE-14B，以及仓内 girl/snake reference images。输出 wan2-1-vace.mp4 的 sha256 为 6eb8a4daf3a0234787afe538a23aba5b455c866f609378b1e827680792139c78；artifact 解码为 81 个非空 1280x720 帧、16 fps、5.06 秒。视觉 QA 抽帧显示官方红色春服女孩和绿色卡通蛇画面持续有效。docs asset /demos/studio/wan2-1-vace-girl-snake.mp4 已用本次 run 刷新。 | 这是官方 demo-parity 推理验证；完整 suite benchmark 仍独立处理。 |
ltx_video_i2v | Studio/API inference run 20260625-142135-586864-ltx-video-i2v 已在 worldfoundry-unified-cu128 跑通；使用本地 LTX-Video 资产、penguin reference image、fps=24、guidance_scale=3.0、height=480、width=832、num_frames=96、num_inference_steps=30、seed=0。docs asset /demos/studio/ltx-video-i2v-penguin.mp4 检测为非空 89 帧 832x480、24 fps 视频。 | 只验证 Studio I2V demo 路线；更完整的 LTX-Video 上游 parity 仍独立处理。 |
ltx2_i2v | Studio/API inference run 20260627-095951-872490-ltx2-i2v 已在 worldfoundry-unified-cu128 跑通；使用本地 LTX-2 资产、骑龙/城堡 reference image、fps=16、guidance_scale=4.0、height=480、width=832、num_frames=17、num_inference_steps=8、seed=114。生成的 ltx2-i2v.mp4 sha256 为 174d3a4ca40c053e92c96d67d5ab2639b4ef6338da44244fffeeb802c5b71660，解码为 17 个非空 832x480 帧、16 fps；视觉 QA 显示 reference scene 被稳定保留并有运动。 | 这验证 LTX-2 I2V Studio/API route；T2V/V2V 变体仍需单独验证。 |
ltx2_3_i2v | Studio/API inference run 20260625-152240-287232-ltx2-3-i2v 已在 worldfoundry-unified-cu128 跑通；使用本地 LTX-2.3 distilled checkpoint、penguin reference image、fps=24、guidance_scale=1.0、height=512、width=768、num_frames=121、num_inference_steps=8、seed=10。docs asset /demos/studio/ltx2-3-i2v-penguin.mp4 检测为非空 121 帧 768x512、24 fps 视频。 | LTX-2.x 的 T2V/V2V 变体仍是 profile-only，待 scoped wrapper 和验证。 |
magi-1 | Studio/API job studio-00024 于 2026-06-27 验证了仓内 MAGI-1 I2V route；使用官方 example image/config 资产、本地 sand-ai/MAGI-1 checkpoint、4.5B distill profile、8 sampling steps、fps=24 和 seed=1234。输出 magi-1.mp4 sha256 为 94e7b57bd3cae491e1852d146a73f3ee0fce0e917160692453e2affe9a27ea11，解码为连贯的 24 帧 720x720、24 fps 视频。 | 官方 runtime 会把本次短帧数请求 padding 到 24 帧；这是有界 Studio validation 证据，不是完整长配置 parity。 |
mochi-1-preview-t2v | Studio/API validation run 20260627-090106-334112-mochi-1-preview-t2v 已在 worldfoundry-unified-cu128 跑通；使用本地 genmo/mochi-1-preview、13 帧、848x480、fps=16 和 greenhouse/grass prompt。输出 mochi-1-preview-t2v.mp4 sha256 为 1fc26f30d9360538f8e52ff0599b7d055633df7479e36b475356f41d7ca58dbd；视觉 QA 显示连贯的温室草地视频。 | 完整官方 31 帧 / 64 step Mochi preview parity 仍待验证。 |
hunyuanvideo-1.5-t2v | 原生仓内 generate.py 有界 validation run tmp/worldfoundry_studio/runs/hunyuanvideo-1-5-native-t2v-demo-8step 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；使用 torchrun --nproc_per_node=8、本地 HunyuanVideo-1.5 资产、雪地猫 prompt、resolution=480p、video_length=9、num_inference_steps=8、cfg_distilled=true、seed=42。输出 sha256 为 c8629c9b801e5b723da7a2124c99091f444a50b293dddc53b36573376971b0dc；artifact 检测为非空 9 帧 848x480、24 fps 视频，人工抽帧可见雪地街道上的猫。 | 仅作为内部有界 validation 记录，不作为公开官方 demo 结果展示；Studio 页面使用 129 帧 demo asset 作为公开视觉示例。 |
hunyuanvideo-1.5-i2v | 原生仓内 generate.py 有界 validation run tmp/worldfoundry_studio/runs/hunyuanvideo-1-5-native-i2v-demo-8step 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；使用 torchrun --nproc_per_node=8、本地 HunyuanVideo-1.5 资产、输入 worldfoundry/data/test_cases/hunyuanvideo_i2v/0.jpg、resolution=480p、video_length=9、num_inference_steps=8、enable_step_distill=true、seed=0。输出 sha256 为 bf75a3cc474a563d386c07091cb3a21e2d20fc6f9b4fa88c6234b91f0c35825f；artifact 检测为非空 9 帧 544x720、24 fps 视频，人工抽帧保持人像/建筑/烟花场景。 | 仅作为内部有界 validation 记录，不作为公开官方 demo 结果展示；Studio 页面使用 129 帧 demo asset 作为公开视觉示例。 |
hunyuanvideo-t2v | Studio workspace /api/jobs 已通过官方 demo parity；此前将仓内 official_hunyuan_video_runtime 的 T2V 源码恢复为与 Tencent-Hunyuan/HunyuanVideo 官方仓库一致。该 run 使用上游 multi-GPU recipe：torchrun --nproc_per_node=8、prompt A cat walks on the grass, realistic style.、height=720、width=1280、num_frames=129、num_inference_steps=50、flow_shift=7.0、embedded_cfg_scale=6.0、ulysses_degree=8、ring_degree=1、seed=42，以及本地 ${WORLDFOUNDRY_CKPT_DIR}/HunyuanVideo。输出 sha256 为 494d709d633bf024c82c47029e26c8adedd4a715e1f9f45aac5c1ff7e9057f6a；artifact 解码为 129 个非空 1280x720 帧、24 fps，并且与 clean official-repo 对照 run 字节级一致。视觉 QA 从首帧开始就是官方 cat-on-grass 序列。docs asset /demos/studio/hunyuanvideo-t2v-cat-grass-official.mp4 已用本次验证后的 Studio 输出刷新。 | 这是 T2V 变体的 release demo-parity 证据。早先 modified-runtime 短 run 出现噪声首帧，现已被本记录取代；修复包括移除被修改过的 T2V runtime 路径，并停止向官方脚本传入不支持的 --fps CLI 参数。 |
hunyuanvideo-i2v | 新增仓内 HunyuanVideo I2V runtime 并注册 HunyuanVideoI2VPipeline 后，Studio workspace /api/jobs 已于 2026-06-28 按官方 demo 配置跑通。该 run 使用上游 8-rank stability recipe：torchrun --nproc_per_node=8、prompt An Asian man with short hair in black tactical uniform and white clothes waves a firework stick.、输入 worldfoundry/data/test_cases/hunyuanvideo_i2v/0.jpg、i2v_resolution=720p、num_frames=129、num_inference_steps=50、flow_shift=7.0、embedded_cfg_scale=6.0、ulysses_degree=8、ring_degree=1、seed=0，以及本地 ${WORLDFOUNDRY_CKPT_DIR}/HunyuanVideo-I2V。输出 sha256 为 98e12d66610bbb4c646a4963110c020dcf98ad030170679a9bd72aa695df26b9；artifact 解码为 129 个非空 864x1024 帧、24 fps。脚本化 WorldFoundry runner 路径 scripts/model_zoo/run_hunyuanvideo_i2v_worldfoundry_runner_demo.sh 也复现了同一 sha256 artifact。与上游 demo asset 抽帧对比后，视觉上保持相同人像/建筑/烟花场景，动作连贯且无空帧。docs asset /demos/studio/hunyuanvideo-i2v-firework-official.mp4 已用本次 Studio 输出刷新。 | 这验证原版 HunyuanVideo I2V Studio/API route 已按官方长 demo recipe 跑通。输出比例来自上游竖图 reference 和 xDiT resize 行为，因此不应期待 1280x720 横版。 |
unianimate-dit | Studio workspace /api/jobs actual inference 已于 2026-06-28 在 worldfoundry-unified-cu128 通过仓内 UniAnimate-DiT official USP 路径验证。Job studio-00172 使用官方 480p human-animation demo 形状：本地 UniAnimate-DiT 与 Wan2.1-I2V 资产、max_frames=81、height=832、width=480、num_inference_steps=50、seed=0、use_usp=true、nproc_per_node=4。输出 unianimate-dit.mp4 sha256 为 57455c3500a00c188592cb655f0337eedf66004913ca08b2e23470b25dcaed06；artifact 解码为 81 个非空 1440x832 帧、15 fps，平均相邻帧差 5.082765761017799。视觉 QA 显示有效的 pose-conditioned human animation，且 Studio /video 与 /image endpoint 均能返回 range response。docs asset /demos/studio/unianimate-dit-human-animation.mp4 已用本次 run 刷新。 | 这验证仓内 4-rank USP Studio/API route；完整 human-animation benchmark scoring 仍独立处理。 |
open-sora | 移除错误的本地 t5-11b override 后，Studio workspace /api/jobs 已于 2026-06-27 在 7870 workspace 通过 validation；该 override 曾导致 4096/1024 caption-channel mismatch。Job studio-00165 使用官方 Open-Sora v1.2 配置形状：DeepFloyd/t5-v1_1-xxl、本地 OpenSora-STDiT-v3、本地 OpenSora VAE、51 帧、240p、30 sampling steps、cfg 7.0、aes 6.5、flow 5 和 seed=42。输出 open-sora.mp4 sha256 为 ae9b8c0e74300519c2628c20e09d1672e838889a312a2693647eb199053d083a；artifact 解码为 51 个非空 432x240 帧、24 fps，平均相邻帧差 2.9100781250000005。视觉 QA 显示连贯的雨夜霓虹街道、反射和稳定建筑。 | 这验证仓内 Open-Sora Studio/API 路线。本次有界设置下运动较弱；更长官方质量 run 独立处理。 |
open-sora-plan | Studio workspace /api/jobs actual inference 已于 2026-06-28 在 worldfoundry-unified-cu128 通过；本次已将仓内 runtime 对齐官方 v1.3 GPU demo。Job studio-00174 使用 LanguageBind/Open-Sora-Plan-v1.3.0、官方 mt5-xxl、examples/sora.txt 中的 Tokyo street prompt、torchrun --nproc_per_node=8、num_frames=93、height=352、width=640、fps=18、guidance_scale=7.5、num_sampling_steps=100、sample_method=EulerAncestralDiscrete、seed=1234。输出 open-sora-plan.mp4 sha256 为 66df2331b08b6818d17982b9c1ff3523385d6cc742865ef6a5ec6a5429d6c2ab；artifact 解码为 93 个非空 640x352 帧、18 fps，平均相邻帧差 5.89398494112319。视觉 QA 显示符合官方 prompt 的 Tokyo neon street、红裙黑夹克女性、湿地反光和连续步行动作。Studio /video 与 /image endpoint 均返回 range response，docs asset /demos/studio/open-sora-plan-tokyo-street.mp4 已用本次 run 刷新。 | 这验证仓内 Studio/API route 已按官方 demo recipe 跑通。已修复：使用官方 mt5-xxl 而不是 umt5-xxl，非 SP torchrun 按 rank 样本数 gather，且优先选择单 prompt artifact，避免 padded grid video 改变分辨率。 |
zeroscope | Studio workspace /api/jobs 短 validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；使用 cerspense/zeroscope_v2_576w、prompt research rover red desert under dusty sunset, slow cinematic pan, stable vehicle geometry、frames=8、fps=8、height=256、width=448、num_inference_steps=8、seed=301。Studio job studio-00018 生成 zeroscope.mp4，sha256 为 9170ac3b553168af17e912885178747f12932f10a6bae68f212b3722d9de8bdb；artifact 解码为 8 个非空 448x256 帧，平均相邻帧差为 3.7503609657287598。视觉 QA 显示红色沙漠 rover 场景和 prompt 匹配。 | 这是仓内 route 的短 Studio validation；旧的 ad-hoc parity script 不随开源包发布。 |
modelscope-t2v | Studio/API inference run 20260625-035911-217392-modelscope-t2v 已在 worldfoundry-unified-cu128 跑通；使用本地 modelscope-damo-text-to-video-synthesis、panda river prompt、fps=8、seed=42。7876 workspace 的 Studio job studio-00019 也于 2026-06-26 跑通；使用 greenhouse rainstorm prompt、fps=8、seed=302，sha256 为 04e84f381e02b3ea7f9f822591a0aaa62eed7c527066ebb193c737005e17010e；artifact 解码为 16 个非空 256x256 帧，平均相邻帧差为 4.229966640472412。 | 当前 ModelScope route 即使请求更宽尺寸也会输出 256x256。HF metadata 显示 checkpoint license 为 non-commercial，发布说明不能当作无限制开源权重。 |
animatediff | Studio workspace /api/jobs 短 validation 已于 2026-06-26 在 worldfoundry-unified-cu128 跑通；此前修复了当前 diffusers/transformers 的 checkpoint key 兼容问题，包括 VAE attention 的 query/key/value/proj_attn 到 to_q/to_k/to_v/to_out.0，以及 CLIP position_ids。Studio job studio-00022 使用 prompt snowy street market at night with lanterns, cinematic camera movement, detailed people silhouettes、frames=8、fps=8、height=256、width=448、num_inference_steps=8、seed=303；生成 animatediff.mp4，sha256 为 0d2eaaf05117edbcea9735ca079eafcd2f7b5e84150381a7fcc4733a6e2d50bb。artifact 解码为 8 个非空 448x256 帧，平均相邻帧差为 8.168740272521973；视觉 QA 显示雪夜灯笼街市与 prompt 匹配。 | 官方默认 artifact parity 仍在 catalog 中单独记录；这一行验证当前统一环境中的 Studio/API route。 |
videocrafter1_i2v, videocrafter1_t2v, videocrafter2_t2v | Studio/API runs 20260624-110643-120154-videocrafter1-i2v、20260624-125058-282785-videocrafter1-t2v、20260624-125058-282694-videocrafter2-t2v 已在 worldfoundry-unified-cu128 跑通，使用本地 VideoCrafter checkpoint。artifact 均为非空视频：VC1 I2V 为 16 帧 512x320，VC1 T2V 为 16 帧 1024x576，VC2 T2V 为 16 帧 512x320。 | 仅作为有界 Studio/API validation 证据；完整上游 VideoCrafter parity 仍是更长验证阶段。 |
当前图像与 Action Studio 验证记录
| Model id | 证据 | 当前 blocker |
|---|---|---|
show-o | Studio workspace /api/jobs actual inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通，使用仓内 Show-O runtime。隔离 7879 workspace 的 job studio-00005 使用 prompt a clean studio photo of a red teapot on a white table，生成 512x512 的 show-o.png，sha256 为 5d6b92304b6c1789b2d05d33777470ebf77a70abec1c53be82727fdb27968153；视觉 QA 确认为白桌上的红色茶壶。该 run 也验证了 /api/jobs/studio-00005/image 对注册过的 workspace root 外部 artifact 返回 200 image/png。 | 这验证 T2I Studio 路径和 artifact preview 修复；Show-O 其他模式仍需单独验证。 |
molmoact2 | Studio workspace /api/jobs actual action inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通所有已配置 MolmoAct2 变体。DROID job studio-00007 写出 droid_action.json，action_shape=[15, 8]，sha256 为 c8ae3bb3ee07abbff216c7665387e358fb3388f7c11cc9803e7e91953d46a4d6，且 actions 非零。后续 API jobs studio-00009 到 studio-00012 分别验证 YAM [30, 14] sha256 7014a43290d922bcd4698ee79e7ffcffe51c0dd4200956d079dd9e83085814dc、SO100 [30, 6] sha256 3768b4316c4cc4132a6aafee794c8c7272e328fe22c1ee636771dd08ad07832c、LIBERO [10, 7] sha256 c27c9398fb02353388deee0d75fb9ac5755ff0cb2e9eac92a3fe049a0d7b8bdb、Think-LIBERO [10, 7] sha256 39c006956a1779f2114da880e41256d8c220d818c8b80990e76e17dea77d7a7c；所有 trace 都报告 backend_quality=official_hf_in_tree_runtime。 | MolmoAct2 已配置 Studio/API action 变体均已 checkpoint-backed 验证。torchao extension warning 非阻塞。 |
openvla | Studio workspace /api/jobs actual action inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通，使用仓内 OpenVLA HF runtime 和 ${WORLDFOUNDRY_HFD_ROOT} 下的本地 checkpoint（例如 openvla/openvla-7b）。Job studio-00009 生成 openvla.json，sha256 为 923b5a8aa351a7e4eddd4fb3c6871530158556828a24e1acdc78d920bc8bab25，backend 为 worldfoundry.openvla.in_tree_runtime.predict_action，输出 1 个 7 维 robot action。 | 默认 base checkpoint 路径已验证。数据集专用 fine-tuned 变体仍需要单独记录 checkpoint 和 unnorm_key 证据。 |
cogact | Workspace CLI action inference 已于 2026-07-01 走到仓内 CogACT runtime；本次使用本地 CogACT--CogACT-Base/checkpoints/CogACT-Base.pt、官方风格 WidowX image/prompt input、cfg_scale=1.5、use_ddim=true 和 num_ddim_steps=10。运行已加载 vendored CogACT VLA loader 和本地 CogACT checkpoint，但在构造 Prismatic LLM backbone 时被 meta-llama/Llama-2-7b-hf 的 401 Unauthorized 阻塞；即使提供本机 HF token 文件也没有通过。 | 这确认当前 blocker 是 gated Llama 2 backbone 授权或完整本地 Llama 2 mirror，不是外部 CogACT checkout。获得 Llama 2 权限前，不要把 CogACT checkpoint-backed action inference 标为已验证。 |
openpi | Studio workspace /api/jobs actual action inference 已于 2026-06-27 在 worldfoundry-unified-cu128 跑通，使用仓内 OpenPI trained-policy wrapper 和本地 openpi-assets/checkpoints/pi05_libero 资产。Job studio-00006 生成 openpi.json，sha256 为 23ba01b93d361dc74fc8bbab254564853476e75c537db4cadd55f31fb1494888，backend 为 worldfoundry.openpi.in_tree_runtime.create_trained_policy_infer，action trace shape 为 [10, 7]。 | big_vision 的 GCS warning 非阻塞。其他 OpenPI policy checkpoint 仍需要单独验证。 |
octo | 添加仓内兼容 alias 以支持 checkpoint config 中仍引用的 octo.data.utils.* 后，Studio workspace /api/jobs actual action inference 已于 2026-06-27 跑通。重跑 job studio-00012 使用专用 worldfoundry-octo-jax profile 和本地 octo-small-1.5，生成 octo.json，sha256 为 43d015b6794e6470fa073dc321a1a82cf3890a359b4a3e27a6c509378ede53db，backend 为 worldfoundry.octo.in_tree_runtime.sample_actions，action shape 为 [1, 4, 7]。 | Octo 仍是合理的 JAX 专用环境例外；本次运行因当前 env 缺少 CUDA 版 jaxlib 而回落到 CPU JAX。若替换 JAX CUDA wheel，需要重新验证 GPU sampling。 |
diffusion-policy | 添加官方 checkpoint target 所需的仓内 infer-only TrainDiffusionUnetLowdimWorkspace 后，Studio workspace /api/jobs actual action inference 已于 2026-06-27 跑通。重跑 job studio-00013 使用官方 low-dimensional PushT checkpoint epoch=0550-test_mean_score=0.969.ckpt，写出 diffusion-policy.json，sha256 为 b0decb9c2f45f49460df5115b3394161e9362ebc7da007a9657737015fdbfdab，backend 为 worldfoundry.diffusion_policy.in_tree_runtime.predict_action，action shape 为 [1, 8, 2]。 | 这验证 low-dim PushT 官方 checkpoint 路径。Image-conditioned 或其他 task 的 Diffusion Policy checkpoint 需要单独 observation schema 和验证。 |
open-magvit2 | Studio/API image validation 已生成非空 64x64 输出 tmp/worldfoundry_open_source_validation/studio_api_7870/open-magvit2/open-magvit2.png，sha256 为 fead203c4c69de5b450c4e5c87a816696645514c5ce99b0fafce788e261053f7。 | 暂不提升为 visual-demo parity；该输出质量低，语义 QA 未通过。 |
Runner 证据
Prop
Type
失败策略
| 状态 | 含义 | 发布处理 |
|---|---|---|
| Pass | 必需阶段已运行，并产出预期产物。 | 可以支撑对应 claim。 |
| Partial | 有阶段因为 network、credentials、data、GPU 或 license review 被跳过。 | 可用于开发，不能支撑更强公开 claim。 |
| Blocked | 必需 source、dataset、license、dependency、checkpoint 或 API 条件不可用。 | Manifest 保持 blocked 或 planned。 |
| Stale | Report hash、manifest hash、git commit、validator script 或 timestamp 不再匹配。 | 重新运行验证后才能计入。 |
| Runner-only | Schema 和 runner path 通过，但 official runtime 未运行。 | 不是 leaderboard evidence。 |
Validation matrix
Matrix 是 model-zoo 和 benchmark-zoo readiness 的 release gate。它会合并 manifest entries 和 staged validation reports，并重新计算 integration status。
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval run \
--all-benchmarks \
--plan-only \
--output-dir tmp/worldfoundry_plan_matrix \
--json
conda run -p "${WORLDFOUNDRY_UNIFIED_ENV_PREFIX}" worldfoundry-eval validate-artifact \
tmp/worldfoundry_plan_matrix/suite_manifest.json \
--kind suite-manifest \
--strict \
--json| Gate status | 含义 | Maintainer action |
|---|---|---|
accepted_integrated | Fresh report 通过所有必需阶段，manifest 也声明 integrated。 | 保持证据 fresh。 |
accepted_variant_integrated | 一个或多个 scoped variants 通过，但 parent family 仍是 planned。 | 继续验证剩余 variants。 |
validated_but_manifest_not_promoted | Report 通过，但 manifest 仍是 planned 或 blocked。 | Artifact review 后再提升。 |
manifest_integrated_without_report | Manifest 声称 integrated，但没有 fresh validation report。 | 运行 staged validation 或降级。 |
manifest_overclaims_integration | Manifest 声称 integrated，但 computed stages 不通过。 | 降级或重新运行 full validation。 |
report_overclaims_integration | Report 声称 integrated，但 staged evidence 不完整。 | 丢弃或重跑 report。 |
stale_report | Report hash、script、git commit、schema 或 manifest entry 改变。 | 重新运行验证。 |
partial_or_blocked | Report 存在，但 stages 失败或被跳过。 | 按 next_action 处理。 |
not_validated | Manifest entry 没有 report。 | 运行对应 runtime preflight 和 official validation run。 |
清单
选择覆盖当前契约变化的最小确定性命令。
检查生成的 JSON 产物，不只看进程退出码。
把跳过的重型阶段记录为明确 blocker，不当作成功。
当 MDX、route generation、search、i18n、layout 或 generated metadata 改变时，运行 docs build。
发布前运行 make lint，确保生成输出、checkpoint、视频、notebook、demo media 和下载数据不会进入 tracked source。
提升 integration status 前刷新 matrix 或 suite reports。
经验规则
模型或基准只有在标准 runner 为对应 runner path 写出 fresh scorecard.json 和 metrics/summary.json 后，才算 benchmark-ready。