跳到正文
热点事件持续更新

RubricAtlas论文发布:用金融研报评估深度研究智能体

1 篇报道1 个报道来源18 小时前更新

先了解这件事

AI 综述

Delin Wang 等研究者在 arXiv 提交论文,介绍 RubricAtlas 评测框架:从 3,079 篇中文金融研报中挖掘类型级分析要求,覆盖 99 种研究类型,用于评估深度研究智能体报告的分析完整性。 实验结果显示,单份研报仅覆盖其类型约一半的分析问题;两套评审管线在十个智能体上达到 κ = 0.71 的检查点一致性和 Kendall τ = 0.87 的排名一致性。该框架将二值检查点关联到报告段落,使评估决策可追溯到报告证据。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv · cs.AI
    RubricAtlas:从专家研报中挖掘类型级评分标准来评估深度研究智能体

    研究者提出 RubricAtlas 框架,从 3,079 篇中文金融研报中挖掘类型级分析要求,覆盖 99 种研究类型,用于评估深度研究智能体报告的分析完整性。实验显示单份研报仅覆盖其类型约一半的分析问题,两套评审管线在十个智能体上达到 κ = 0.71 的检查点一致性和 Kendall τ = 0.87 的排名一致性。该框架将二值检查点关联到报告段落,使评估决策可追溯到报告证据。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。