Radar Brief 2026 年第 23 周 · 2026-07-02 — 2026-07-09

BioMysteryBench 下载2408
不可检索任务验证人类判断稀缺

本周扫描 86 个 HF 组织 · 50 个 GitHub 组织 · 71 个博客 · 125 个 X 账户

0
高价值数据集
0
相关论文
0
博客文章
0
活跃仓库
一句话速览

Anthropic 在 2026-04-29 发布的 BioMysteryBench-full 下载达 2,408,指向“不可检索答案”的高价值判断评测需求 [P0]、NVIDIA 机器人与物理世界数据集同时放量,PhysicalAI-Robotics-Locomanipulation-GRAIL 下载 24,483 成为本周最强需求信号 [P0]、2026-07-01 至 2026-07-02 Meta 连续发布 S-EMBER 与 r3d-bench,视频记忆与 3D 空间推理成为新评测前沿 [P1]。本周最强数据需求信号:机器人操作轨迹。

Key Findings

本周 5 条高商业价值发现

P0 Anthropic 在 2026-04-29 发布的 BioMysteryBench-full 下载达 2,408,指向“不可检索答案”的高价值判断评测需求 [P0]

Anthropic/BioMysteryBench-full 于 2026-04-29 发布,当前 downloads 2,408、likes 30;同日发布的 Anthropic/BioMysteryBench-preview downloads 581、likes 14。该基准包含 90 个 bioinformatics 问题,要求基于匿名生物数据文件完成 alignment、expression、variant calling、motif discovery、structure 等真实分析,且“source dataset cannot be looked up”。

商业意义 → 这类数据不是简单知识问答,而是需要人对原始证据做判断、排除检索捷径的高难评测集。对集识光年而言,这是“让人通过贡献判断获得收入”的直接验证:高价值训练与评估数据将越来越需要专家对证据链、推理过程和答案可证性进行裁决。可重点布局生命科学、医疗、工业分析等“不能靠背答案”的任务型评测与偏好数据服务。
P0 NVIDIA 机器人与物理世界数据集同时放量,PhysicalAI-Robotics-Locomanipulation-GRAIL 下载 24,483 成为本周最强需求信号 [P0]

nvidia/PhysicalAI-Robotics-Locomanipulation-GRAIL 于 2026-04-28 发布,downloads 24,483、likes 13;nvidia/GR00T-N1.7-AppleToPlate 于 2026-05-21 发布,downloads 217;nvidia/Arena-G1-Static-PickNPlace-Task 于 2026-05-06 发布,downloads 14。三者均围绕 humanoid loco-manipulation、多模态轨迹、视频、动作与人-物交互;同期 NVIDIA Robotics Blog 于本周强调与 Hugging Face 推进 LeRobot 开源生态。

商业意义 → 机器人训练已从静态视觉数据转向“状态—视觉—语言—动作”一体化轨迹,且需要对成功/失败、阶段进展、抓取质量、接触事件进行细粒度判断。这里的人类价值不在低端框选,而在对动作质量、任务完成度、异常恢复和安全边界做判断。集识光年可切入机器人示教回放审核、失败案例分层、轨迹偏好排序和多阶段任务完成度评价。
P1 2026-07-01 至 2026-07-02 Meta 连续发布 S-EMBER 与 r3d-bench,视频记忆与 3D 空间推理成为新评测前沿 [P1]

facebook/S-EMBER 于 2026-07-01 发布,downloads 17、likes 0,为 streaming egocentric memory retrieval 视频 QA 基准;facebook/r3d-bench 于 2026-07-02 发布,downloads 301、likes 2,包含 3,033 个问答标注、57 个 Aria Digital Twin 序列,面向自然第一视角 RGB-D 视频上的定量 3D 空间推理。

商业意义 → 第一视角视频、记忆检索与 3D 推理的共同难点,是模型必须理解时间连续性、空间关系和任务上下文,自动生成伪标签的可靠性有限。未来高价值数据需求将集中在视频切片事件标注、空间关系裁定、记忆召回相关性判断、任务阶段摘要等环节。集识光年可设计“连续视频判断任务市场”,把复杂多轮判断拆成可分发的人类贡献单元。
P1 Agent 评测正在从静态问答转向真实轨迹与长程决策,Qwen/AgentWorldBench 与 AllenAI Asta 数据同步给出信号 [P1]

Qwen/AgentWorldBench 于 2026-06-22 发布,downloads 1,989、likes 70,基于 Tool Decathlon、Terminal-Bench、OSWorld-Verified 等真实前沿模型轨迹构建;allenai/asta-summary-citation-counts downloads 从 680 增至 1,438,增长 758、增幅 111.5%;allenai/asta-bench-submissions 从 78 增至 94。与此同时,Snorkel 本周连续发布 Agents’ Last Exam、continual learning、agentic evaluation 等多篇文章,Hacker News 上 Senior SWE-Bench 于 2026-07-02 获得 186 票、119 评论。

商业意义 → Agent 数据需求正在从“指令-回答对”迁移到“轨迹-结果-引用-工具使用-长期表现”全链路记录。这里最缺的是人对过程质量的判断:步骤是否合理、调用是否必要、引用是否可信、失败是否可恢复。集识光年应优先建设 agent 轨迹审查、工具调用偏好、引用正确性验证、长期任务分段评分等数据能力,而不是只做静态 SFT 语料。
P2 对齐研究本周集中转向“噪声偏好、数据筛选即对齐、失败驱动数据演化”,说明高质量人类反馈仍是瓶颈 [P2]

2026-07-03 的《Unbiased Alignment for Large Language Models with Noisy Preferences》直指真实偏好数据噪声问题;2026-07-06 的《Attention Limited Reward Learning》讨论人类比较反馈受注意力约束;2026-07-08 的《Online Data Selection Is Implicit Alignment》提出在线数据选择本身就在改变模型偏好;2026-07-07 的《CurateEvo: Data-Curation Evolving for Agentic Post-Training》强调基于失败驱动的数据筛选与 refinement;2026-07-08 的 diffusion RLHF 论文则强调反馈效率低。

商业意义 → 行业正在承认:对齐问题越来越像“人类判断采集与质量控制问题”。这对集识光年是结构性利好,因高质量偏好、争议样本复核、分歧建模、专家仲裁、噪声校正都会成为稀缺能力。建议将服务表述从“数据生产”升级为“判断基础设施”,尤其面向偏好学习、红队、安全和 agent 后训练。

Demand Signals

从模型发布反推训练数据需求

数据类型 强度 趋势 关联信号
机器人操作轨迹
极强 ↑ 新增
nvidia/PhysicalAI-Robotics-Locomanipulation-GRAIL 下载 24,483,GR00T-N1.7-AppleToPlate 与 Arena-G1-Static-PickNPlace-Task 同步布局
Agent 真实轨迹与长程评测
极强 ↑ 新增
Qwen/AgentWorldBench 于 2026-06-22 发布,downloads 1,989;Snorkel 本周连续讨论 ALE · continual learning · agent evaluation
科研分析评测数据
↑ 新增
Anthropic/BioMysteryBench-full 于 2026-04-29 发布,downloads 2,408,要求基于匿名生物文件做真实分析
第一视角视频记忆/3D 推理
↑ 新增
facebook/S-EMBER 与 facebook/r3d-bench 于 2026-07-01/02 连续发布
语音多语言问答评测
↑ 新增
google/svq downloads 2,060,覆盖 26 locales · 17 languages
检索引用与科研 Agent 证据数据
↑ 新增
allenai/asta-summary-citation-counts 下载从 680 增至 1,438,增幅 111.5%
偏好学习与噪声校正数据
↑ 新增
2026-07-03 至 2026-07-08 多篇论文聚焦 noisy preferences · attention-limited feedback · diffusion RLHF feedback efficiency
数据归因与模型记忆分析
↑ 新增
EleutherAI/bergson-wikitext-512-chunks · bergson-recall-9000 于 2026-07-08 发布
隐私与合成敏感文本
↑ 新增
nvidia/Privasis-USA 与 Meta 隐私感知基础设施博客共同强化隐私数据治理需求
气候/仿真时序环境
↑ 新增
nvidia/STRATA-SCREAM 三个数据集于 2026-06-30 发布,面向天气与气候 ML
固定机位视频理解/跨镜头追踪数据 ↓ 退出 上期出现,本期未出现
RL 环境与任务回合数据 ↓ 退出 上期出现,本期未出现
奖励模型与偏好比较数据 ↓ 退出 上期出现,本期未出现
Agent 工具使用轨迹 ↓ 退出 上期出现,本期未出现
多语言质量评测数据 ↓ 退出 上期出现,本期未出现
科研与企业文档推理数据 ↓ 退出 上期出现,本期未出现
3D 世界模型/机器人空间标注 ↓ 退出 上期出现,本期未出现
安全与可靠性评测数据 ↓ 退出 上期出现,本期未出现
科学计算与工业仿真数据 ↓ 退出 上期出现,本期未出现
视频生成对齐数据 ↓ 退出 上期出现,本期未出现

Download Movers

本周下载量变化最大的数据集

数据集 下载量 周增长
allenai/asta-summary-citation-counts 1,438 +111.5%
allenai/asta-bench-submissions 94 +20.5%
nvidia/HiLiftAeroML 12,597 +11.2%

想深聊本期内容?

Kai
Kai Founder & CEO
苏文
苏文 AI 文档与发布工程师
陆明哲
陆明哲 AI 产品经理

AI Dataset Radar 自动生成 · 每周更新

AI Dataset Radar →