world-model-arena-releases

World Model Arena 是一个用于世界模型评估的基准数据集和竞技平台。它提供版本化的公共场景合约和预计算的生成式展开（rollouts）。数据集的输入为合成的 CC0 许可证场景，模型输出则保留各自声明的许可证。提交通过数据集 Pull Request 进行，无需适配器。投票和配额计数器以及生成源保持私有。数据集包含多个版本：主要版本为 `worlds-realistic-v2`（摄影风格包），其中固定包含 LTX、Cosmos 3 Edge 和 Cosmos 3 Nano 配置；另一个版本为 `native-camera-v1`（本地相机发布），注册了 HY-WorldPlay 8B 和 SANA-WM Streaming 模型。SANA 生成已排队等待验证，HY 则待定许可权限。历史插图输入和合并提交被保留。模型只有在完整包验证、审查和明确激活后才进入排名。该数据集适用于世界模型生成能力的评估、基准测试以及模型对比研究。World Model Arena is a benchmark dataset and competition platform for evaluating world models. It provides versioned public scene contracts and pre-computed generative rollouts. The datasets inputs are synthetic CC0-licensed scenes, while model outputs retain their respective declared licenses. Submissions are made via dataset pull requests without the need for adapters. Voting and quota counters, as well as generation sources, remain private. The dataset includes multiple versions: the main version `worlds-realistic-v2` (photorealistic package) which includes fixed configurations of LTX, Cosmos 3 Edge, and Cosmos 3 Nano; another version `native-camera-v1` (native camera release) which registers the HY-WorldPlay 8B and SANA-WM Streaming models. SANA generations are queued for verification, while HY is pending license permissions. Historical illustration inputs and merged submissions are retained. Models only enter the ranking after complete package verification, review, and explicit activation. This dataset is suitable for evaluating world model generation capabilities, benchmarking, and model comparison studies.

原始信息汇总

World Model Arena Releases 数据集概述

基本信息

• 数据集名称：World Model Arena Releases
• 许可证：CC-BY-4.0
• 数据集地址：https://huggingface.co/datasets/suvadityamuk/world-model-arena-releases

数据集内容

• 版本化的公开场景契约（versioned public scenario contracts）
• 预计算的生成式 rollout（precomputed generative rollouts）

提交方式

• 通过 Dataset pull requests 提交
• 无需适配器（no adapter is required）

输入与输出

• 输入为合成 CC0 场景（synthetic CC0 scenes）
• 模型输出保留其声明的许可证（Model outputs retain their declared licenses）

隐私与来源说明

• 选票与配额计数器为私有（Ballots and allowance counters are private）
• 生成来源为私有（Generation source is private）

摄影包发布

• 新的摄影包为 worlds-realistic-v2
• 固定（pinned）了 LTX、Cosmos 3 Edge 与 Cosmos 3 Nano 配置
• 历史插画输入与已合并提交均被保留

相关文档

• docs/realistic-release.md：场景说明
• docs/cosmos-models.md：NVIDIA 清单
• docs/submissions.md：提交协议

排名规则

• 模型仅在完成整包验证（complete-pack validation）、审核（review）与显式激活（explicit activation）后才会被排名

原生相机发布（Native-Camera Release）

• 注册模型：HY-WorldPlay 8B 与 SANA-WM Streaming
• SANA 生成已排队等待验证
• HY 正在等待许可授权
• 相关文件：
  • catalog/native-camera-v1/models.json
  • docs/native-camera-release.md
• 两项注册均不属于活跃排名

搜集汇总

数据集介绍

构建方式

世界模型竞技场发布数据集依托版本化公共场景契约与预计算生成回放构建，形成可复现的评估基准。场景输入采用合成CC0素材，确保来源开放且无版权争议；模型输出则保留各自声明的许可条款。新摄影包worlds-realistic-v2固定了LTX、Cosmos 3 Edge与Cosmos 3 Nano配置，历史插画输入与已合并提交均予以存档。提交通过数据集拉取请求完成，无需适配器。模型须经完整包验证、评审与显式激活方可进入排名， ballots与配额计数器保持私有，生成源亦不公开。

特点

该数据集以版本化契约与预计算回放为核心特征，兼顾可复现性与许可合规。其摄影包与原生相机发布相互独立，HY-WorldPlay 8B与SANA-WM Streaming在native-camera-v1中注册，但前者待许可授权、后者排队验证，均不构成活跃排名。数据集保留历史插画输入与合并提交，支持场景与模型清单的透明追溯。输入场景为合成CC0，模型输出许可各异， ballots与配额计数私有，生成源不公开。排名仅授予通过完整包验证、评审并显式激活的模型，确保评估严谨。

使用方法

使用该数据集时，研究者可通过数据集拉取请求提交模型，无需额外适配器。需参照docs/realistic-release.md获取场景定义，docs/cosmos-models.md查阅NVIDIA模型清单，docs/submissions.md遵循提交协议。模型须经完整包验证、评审与显式激活方可进入排名。原生相机发布见catalog/native-camera-v1/models.json与docs/native-camera-release.md，其中HY-WorldPlay 8B与SANA-WM Streaming仅为注册状态，不参与活跃排名。 ballots与配额计数器私有，生成源不公开，使用者应遵守各模型声明许可。

背景与挑战

背景概述

世界模型竞技场（World Model Arena Releases）是一个版本化的公共场景契约与预计算生成式推演数据集，旨在推动生成式世界模型的可复现评估与公平比较。该数据集由相关研究团队于近年构建，核心研究问题在于如何为生成式模型提供标准化的场景输入与透明的提交协议，以支持模型能力的系统化排名。其影响力体现在为生成式世界模型领域提供了首个基于公共契约和预计算推演的基准平台，促进了模型评估的规范化和可重复性。

当前挑战

该数据集所解决的领域问题在于生成式世界模型的标准化评估与排名，传统评估缺乏统一场景契约和透明提交机制。构建过程中面临的挑战包括：确保合成场景的多样性与CC0许可合规；管理私有投票与配额计数器以维护评审公正；协调外部模型（如LTX、Cosmos系列）的许可与配置固定；以及处理历史插画输入与合并提交的兼容性。此外，模型需通过完整包验证、审查与显式激活方可获得排名，增加了流程复杂性。

常用场景

经典使用场景

在生成式人工智能与具身智能交叉的前沿领域，世界模型（World Model）旨在从高维感知输入中习得环境的动态演化规律，从而支撑预测、规划与决策。world-model-arena-releases数据集通过提供版本化的公开场景契约与预计算生成式推演包，构建了世界模型生成质量的可复现基准。其经典使用场景集中于对LTX、Cosmos 3 Edge及Cosmos 3 Nano等视频生成模型在合成CC0场景下的推演结果进行标准化评测与排名。研究者借助该数据集，可在统一场景契约下比较不同模型对物理合理性与时序连贯性的建模能力，并以完整包验证、评审及显式激活的流程保障排名的严谨性，从而推动世界模型评测从碎片化走向规范化。

解决学术问题

该数据集直面世界模型研究中长期存在的评测不可比、复现困难与许可不透明等痛点。以往视频生成与世界模型工作多依赖私有数据与自定义指标，导致横向比较缺乏共同基础，结论难以验证。world-model-arena-releases通过公开场景契约、预计算推演输出以及清晰的提交与激活协议，为学术共同体提供了可审计的对照平台。它使研究者能够在同一合成输入分布下考察模型对场景演化的建模误差，并区分生成能力与数据记忆效应。其意义在于将世界模型评估从主观示例展示转向可验证的基准流程，为物理一致性、长时程预测等核心问题的量化研究奠定方法学基础。

衍生相关工作

围绕该数据集，已衍生出若干具有代表性的工作方向。其一，基于worlds-realistic-v2摄影级场景包，研究者对LTX、Cosmos 3 Edge与Cosmos 3 Nano等模型展开系统评测，形成可追溯的排名与配置清单。其二，native-camera-v1注册表收录了HY-WorldPlay 8B与SANA-WM Streaming等原生相机世界模型，催生针对相机可控生成与流式推演的验证研究。其三，提交协议与目录清单的版本化设计鼓励社区贡献场景与模型注册，推动世界模型竞技场的生态扩展。这些衍生工作共同强化了世界模型评测的公开性、可复现性与持续演进能力。