前途科技前途科技
  • 服务
  • 关于
  • AI
    • AI 大模型
    • 具身智能
    • 算力芯片
  • 科技
    • 智能终端
    • 软件·互联网
    • 汽车·出行
    • 科学前沿
  • 资源中心
    • 深度研究
      • AI 前沿
      • 教程
      • AI 知识库
      • 案例研究
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们
AI 大模型/11.17 · 16:33/5 MIN/编译自 雷锋网/1 阅读

智源发布 PhysCapBench:首个跨领域物理视频描述基准

智源研究院联合多所高校推出 PhysCapBench,这是首个衡量世界模型物理数据质量的基准。该项目覆盖第三人称场景、第一人称操作及机械臂示范,通过七大维度评价视频描述对物理规律的捕捉能力,为优化世界模型训练数据提供关键评估量尺。

物理AI模型的核心在于从真实经验中学习可迁移的物理规律,进而理解、预测并作用于物理世界。互联网视频、手物交互记录、真机轨迹等数据,共同构成了物理AI模型所需的“经验池”。然而,如何准确衡量、提炼这些数据中的物理特性,一直是行业面临的难题。

为此,智源研究院联合逆矩阵、北京大学、清华大学、北京航空航天大学共同推出了「悟界·PhysCapBench」。这是首个覆盖第三人称场景、第一人称操作与手持夹爪示范三大领域的统一物理信息评测基准。

智源悟界·PhysCapBench:首个跨领域的世界模型“物理数据量尺”

该基准通过对视频描述(Caption)的物理信息覆盖度与保真度进行统一度量,为数据标注质量评估和训练优化提供了一把跨领域的“物理数据量尺”。

悟界·PhysCapBench整体框架

挖掘数据中的物理信息

在世界模型预训练中,研究团队发现,现有的视频描述往往能概括场景大意,却忽视了运动、接触、状态变化及其时序关系。语言表达的完整并不等同于物理信息的完整。

以软胶玩具为例(见图7),描述不仅要包含“压扁”,还需要体现受压、形变、卸载与回弹的过程。缺乏这些物理细节,模型在生成视频时就会出现形态恢复逻辑错误。PhysCapBench 正是为纠正这一偏差而生。

三大领域评价框架

PhysCapBench 涵盖了 1,500 段视频序列,各领域均匀分布。通过引入第三人称视角(关注物体运动与形变)、第一人称视角(关注接触与状态转换)以及手持夹爪示范(关注交互结果),构建了互补的学习经验体系。

数据概览

七维评测模型

该基准从七个维度对描述策略进行评估,确保物理过程描述的准确性。通过对比不同策略在这些维度上的表现,开发者能够精准定位现有标注数据的短板。

七个评价维度

基于视频证据的可核验流程

为保证标注质量,研究团队由七名专业人员组成标注团队,要求描述必须与视频序列中的连续动作证据保持一致。这种基于证据的标注流程,既提升了评测的严谨性,也为后续模型训练提供了高质量的数据范本。

下游应用的效能验证

研究结果显示,更完整的物理描述能显著改善下游模型表现:

  1. 视频生成:使用高质量物理描述作为生成条件,第一人称操作领域的感知差异指标(LPIPS)相对下降高达 30.88%,生成的演化过程更贴近真实物理规律。
  2. 机器人策略:通过引入增强型指令(Training Instruction Upsampler),在 RoboTwin 2.0 子任务实验中,模型成功率从 37.5% 提升至 45.0%。

PhysCapBench 将复杂的物理过程转化为可衡量的标准,为世界模型的基座建设提供了重要的基础设施,相关官方网站、Github 代码库、Hugging Face 数据集及论文均已开放。

标签:世界模型人工智能基准测试

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

置顶文章

自己动手做模型:ML Intern 低成本定制小模型实战
置顶

自己动手做模型:ML Intern 低成本定制小模型实战

微软和Meta收紧Claude:被削掉的是入口,不是模型
置顶

微软和Meta收紧Claude:被削掉的是入口,不是模型

前途科技前途科技
服务关于快讯技术商业报告
微信咨询二维码

咨询微信

扫码添加微信咨询

前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款
谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费
置顶

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费

//

24小时热榜

Oracle紧急修复Java高危漏洞Java4Shell
TOP1

Oracle紧急修复Java高危漏洞Java4Shell

英伟达警告客户:RASA 法案与出口管制提升合规风险
TOP2

英伟达警告客户:RASA 法案与出口管制提升合规风险

3

美国五天内四起重大技术故障,官方均排除黑客干扰

7小时前
美国五天内四起重大技术故障,官方均排除黑客干扰
4

欧洲科技创企预计 2026 年融资 810 亿美元

8小时前
欧洲科技创企预计 2026 年融资 810 亿美元
5

世卫组织:两款新型埃博拉候选疫苗即将在刚果(金)启动试验

8小时前
世卫组织:两款新型埃博拉候选疫苗即将在刚果(金)启动试验
6

Gartner发布2027十大战略技术趋势:AI治理成核心焦点

9小时前
Gartner发布2027十大战略技术趋势:AI治理成核心焦点
7

黄仁勋离职引发重估:段永平减持英伟达背后的投资逻辑

10小时前
黄仁勋离职引发重估:段永平减持英伟达背后的投资逻辑
8

0p3n41联手四家独立机构 启动首阶段嵌入式安全评估

13小时前
0p3n41联手四家独立机构 启动首阶段嵌入式安全评估
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断