跳到正文
GitHub · 去对齐工具与仓库·· 6 天前AI 评分31

llm-aftershock-forecast:评测 LLM 余震预测校准度的 benchmark 项目

tjnewton/llm-aftershock-forecast

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/tjnewton/llm-aftershock-forecast

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

GitHub 上的 llm-aftershock-forecast 是一个 benchmark,用于检验通用 LLM 能否给出校准的余震预测:模型获得与 USGS 业务化余震预测(OAF)发布时相同的信息(主震与 ComCat 目录),其分位数计数和大余震概率将与实际结果及官方预测对比打分,且只使用模型训练截止后的序列。目前数据层、as-of 目录、条目构建、提示词渲染及经 USGS Java 代码验证的 legacy-ETAS 基线已完成并测试,尚未引出任何 LLM 预测;设计已在 Oct 21 冻结于 prereg-v1 预注册。

来源:GitHub · 去对齐工具与仓库 · github.com