跳到正文
10月20日周二
  1. GitHub · 3D 生成新仓库46

    MrScripty 开源 Tuldok:本地数据集工作室,支持标注、审查与可复现发布

    GitHub 上的新仓库 Tuldok 是一个本地数据集工作室,可将图片、文本、音频及部分空间数据导入、标注并冻结为带版本与溯源信息的可复现发布。其 Data → Pipeline → Runs 工作流提供 CPU 图像、文本和音频区间分类及验证导出,但不支持 ASR 和通用 3D 训练。运行需 Linux 或 WSL2、Python 3.10+ 及本地 PostgreSQL 16–18(测试版本 17.11),无需 JavaScript 构建或托管数据库。

  2. AIHOT · 精选49

    斯坦福 HAI 发布 MedHELM、PhysicianBench 与 HealthAdminBench,测出医疗 AI Agent 实际完成率不足一半

    斯坦福团队总结三年构建医疗 AI 基准的成果:PhysicianBench 上最佳模型 GPT-5.5 单次仅完成 46% 任务,HealthAdminBench 上 Claude Opus 4.6 完成 36.3%。MedHELM 覆盖 5 大类 121 项临床任务,其中临床决策支持和管理流程得分最低,失败主要源于跨文档与系统传递信息时丢失上下文。两项基准均以合成数据、公开代码和排行榜开放。

  3. GitHub · 3D 生成新仓库40

    Arandu 开源:把访谈录音转为知识图谱并做无参考评测的知识发现工具

    新开源项目 Arandu 可将访谈录音转录后,用 LLM 生成按 Bloom 分类四层分级的问答 benchmark,并构建知识图谱,评测各检索策略的回答与弃答表现。其评测无需 ground-truth 图谱,通过基准问题、实体扰动的不可答探针及 TC/FC/FA/TA 四格指标进行功能化评估,包含 null、oracle、bm25 等六种检索臂。案例研究对象是 2024 年 5 月巴西南部洪灾后沿河社区访谈语料。

  4. GitHub · 灵魂体仓库15

    LLM 跨语言多标签情绪分类课程项目(XED 数据集)

    这是一份大语言模型课程项目书,要求学生用 XED 多语言情绪数据集评估 LLM 的跨语言多标签情绪分类,对比 prompt engineering 与 PEFT 两种适配方法。数据集基于电影字幕,标注 Plutchik 八类情绪,各语言标注行数从马其顿语 300 行到巴西葡萄牙语 12,295 行不等,相差超过 40 倍。项目要求固定 70/20/10 划分、统一实验矩阵,并在英语与指定语言上评测零样本与五样本提示等条件。

10月19日周一
  1. GitHub · 灵魂体仓库52

    lablup 开源 llm-benchmark-inventory,韩英 LLM 基准与许可证清单

    lablup 在 GitHub 上线 llm-benchmark-inventory 仓库,以韩语整理韩文与英文 LLM 基准、推理性能工具、公开性能对比和 GPU·引擎资源监测资料,英文界面后续单独提供。清单收录韩语基准 57 个(商用可用 28 个)与英文基准 31 个(商用可用 21 个),每个条目附任务示例、许可证、修改/再分发条件、lm-evaluation-harness 是否内建,以及分数出处和确认日期;基准卡还列出同源同配置下得分最高的 3 个模型与 3 个开放权重模型。许可证于 2026-09-26 核对,仓库提醒后续可能变化,使用前需复查原文。

  2. Reddit · r/LocalLLaMA18

    为开源 LLM 建立会话数据共享仓库与浏览器插件的社区提议

    Reddit r/LocalLLaMA 用户提议建立公共仓库,供贡献者手动上传与模型对话的会话数据,并开发浏览器插件等工具自动收集。由于前沿模型禁止蒸馏、开源 LLM 训练预算有限,作者认为共享会话数据有助于提升开源模型能力,同时提出需兼顾数据匿名化、贡献者积分激励与付费下载分成机制。

10月18日周日
  1. Reddit · r/LocalLLaMA48

    browsecomp-plus-mini:从 BrowseComp-Plus 830 条查询中精选 15 条,无需 LLM judge 即可近似排序 deep-research 智能体

    Reddit 用户发布 browsecomp-plus-mini,从 BrowseComp-Plus 的 830 条查询中选出 15 条子集,用于低成本比较搜索智能体。该子集与完整基准的加权 Spearman 排序一致性达 0.88(随机 15 条为 0.75),全基准分差超 10 分的两个系统约 96% 情况下保持排序。答案均为 1-4 个词,按归一化精确匹配评分,无需 LLM judge,成本不足完整运行的 2%。

  2. GitHub · 3D 生成新仓库55

    ORBIA 基准发布,评测交互式视频世界模型的 3D 一致性

    ORBIA 是一个评测交互式视频世界模型 3D 一致性的基准,已开源评测代码、模型适配器和数据构建流水线。基准包含 720 个案例(480 个 22 秒短案例、240 个 60 秒长案例),从 ScanNet++、SpatialVID、Sekai、MiraData、自录视频和 48 个 Unreal Engine 环境的 11 万样本中精选而来,按输入保持、生成内容持久性和 3D 自一致性等六个维度加权评分,并附 27 个模型的排行榜,SolarWM-H3 以 76.32 的 Overall 分居首。

  3. GitHub · 灵魂体仓库39

    开源论文研究工具 AURA:多源抓取、个性化排序与 AI 摘要

    开源项目 AURA(Automated Understanding of Research Articles)上线 GitHub,可从 arXiv、Semantic Scholar 和 RSS 订阅抓取论文,并用 PyTorch 神经网络按用户偏好做个性化排序。它支持全文 PDF 的结构化摘要、基于 RAG 的论文问答、K-Means 主题聚类趋势雷达,以及每日邮件摘要和每周研究简报。项目支持 Groq、OpenAI、Anthropic、Google 等 LLM 提供商,提供 Docker Compose 一键部署和 React Native Android 应用,需 Python 3.10+。

  4. GitHub · 3D 生成新仓库21

    J26-SE-331 团队构建需求可追溯的 BDD 测试 QA 框架,治理 LLM「假可运行测试」问题

    斯里兰卡 IT 学院 J26-SE-331 团队提出一个四组件 BDD 测试 QA 框架,针对 LLM 生成「能跑通但未真正验证需求」的 false-runnable test。四个组件 C1-C4 依次做接地需求细化、边界感知 Gherkin 生成、带 mock 理由的测试生成和需求可追溯的变异充分性评估,每个交接点用 JSON 契约并设人工审查决策。团队将通过条件化流水线与独立阶段基线的消融实验,验证端到端可追溯性能否改善测试充分性与缺陷定位。

  5. GitHub · 去对齐工具与仓库26

    Jagadish-dataset-engineering:把 SFT 与评测的数据层做成可测试的代码

    一个个人学习/作品集项目,将 SFT 与评测的数据层实现为可测试代码,涵盖启发式过滤、MinHash/LSH 去重、带仲裁与标注者偏斜检测的标注、评测去污染、QC 门控合成数据及 dataset card。全部离线运行于合成数据,无需 API key;真实运行结果为 8 条日志保留 5 条、1 个重复组,并检出 always-positive 标注者(chi-square 28.5)。

  6. GitHub · 3D 生成新仓库45

    Arka 开源:基于 YAML 配置的 SFT 合成数据生成工具

    开源仓库 arka 发布,通过单一 YAML 配置声明式定义 SFT 合成数据生成全流程,涵盖种子摄取、生成、去重、质量过滤与输出,并支持 SQLite 检查点断点续跑。它支持 JSONL、CSV、PDF 多源输入,提供 prompt 与 Evol-Instruct 两种生成策略、MinHash + LSH 的 O(n) 近似去重、canary 短语隐私检测,可输出 JSONL、ChatML、Alpaca 格式,项目采用 MIT 许可。

  7. arXiv · cs.CL23

    用嵌入向量度量数据多样性:多样性度量方法分类与 EmbDivBench 基准

    一项已被 EMNLP 2026 主会接收的研究提出 21 种基于嵌入向量的文本多样性度量方法的分类体系,按计算方式划分为四个家族,并发布 EmbDivBench 基准,从 variety、balance、disparity 三个维度在模拟与自然文本上评测。实验显示,最常用的 Mean Pairwise Distance 在三个维度上均被多种替代方法超越,Graph Entropy 综合表现最佳,研究还给出了度量选择的实用建议。

  8. arXiv · cs.CL19

    双任务向量合并:利用情感与 ASR 知识实现低资源阿尔茨海默病语音检测

    研究者提出 Dual Task Vector Merging 方法,向冻结的 wav2vec 2.0 各 Transformer 层注入由情感和 ASR 微调模型导出的任务向量,用于阿尔茨海默病语音检测,仅需训练逐层合并系数与线性分类头,更新参数不到全量微调的 0.1%。在 ADReSS 和 ADReSSo 的说话人独立实验中优于 frozen probe、LoRA 和全量微调,与 LoRA 结合效果最佳;PROCESS 三分类任务及 20%、40%、80% 低资源设置下也验证了增益。

  9. GitHub · 3D 生成新仓库40

    MMIRAGE:模块化多模态数据重排与增强生成引擎开源

    GitHub 新开源项目 MMIRAGE(Modular Multimodal Intelligent Reformatting and Augmentation Generation Engine)是一个利用生成模型(含 VLM)处理大规模数据集重排与增强的平台。它支持文本与图像多模态处理、YAML 配置、多节点并行与分布式推理,可对接多种 LLM、VLM 和图像生成模型,并支持任意数据集 schema。项目提供 pip 安装、基于 SGLang 的 GPU 处理器、GHCR 预构建 Docker 镜像(GPU/CPU)以及 `mmirage run/check/merge` 等 CLI 命令。

  10. arXiv · cs.CL34

    表格序列化方式决定大语言模型保留哪些关系

    一项 arXiv 研究考察文本序列化对指令微调大语言模型表格查找的影响:同一 256 单元格合成表格分别以行优先和列优先渲染,最优格式随表格形状变化。64x4 竖长表中行优先领先 42.3-54.0 个百分点,4x64 宽表中列优先领先 35.0-59.0 个百分点。研究提出“关系局部性”概念:序列化让一种关系保持局部可用,另一种则依赖位置对齐。

  11. arXiv · cs.AI28

    IndustrialCAD-1400:面向工业装配体的 text-to-CAD 基准

    研究者发布 text-to-CAD 基准 IndustrialCAD-1400,包含 1,400 条请求,覆盖 40 个领域的 400 类设备,以及 250 个含 4 个设计案例的族。每条族请求中位数指定 17 个命名部件或配置角色和 6 个明确数值目标,模型生成的几何程序在统一 Blender 环境中执行,并通过前视、等轴测和俯视图评估部件、布置与接口完成度。该基准将 text-to-CAD 从可识别的零件几何扩展到联合组件、接口、空间与数值规格的工业装配体综合。

  12. arXiv · cs.CL32

    BanglaBBQ:面向孟加拉国语境的问答偏见基准

    BanglaBBQ 是一个覆盖孟加拉语和英语的问答偏见基准,捕捉孟加拉国语境下的刻板印象,保留了 140 个改编模板并新增 5 个本地类别、372 个经人工校验的新模板。评测 Qwen3-4B、Qwen3-8B、GPT-4.1-mini 和 Gemini 2.5 Flash 四个模型显示:语境模糊时所有模型都倾向刻板印象,且英语结果无法预测孟加拉语中的表现。

10月17日周六
  1. arXiv · cs.CL32

    GLOSS-MT:用可编辑词典实现可控低资源机器翻译

    GLOSS-MT 通过离线英-特威语(Twi)词典替换源句名词短语并一次性微调翻译模型,实现可控的低资源机器翻译。在英语到阿散蒂特威语文档级基准(84 篇文档、四个领域)上,基于 NLLB-200(600M、1.3B、3.3B)、OPUS-MT en-tw 和 TranslateGemma 4B 的微调模型 chrF2 提升 +2.85 至 +5.48,三个 NLLB 微调模型达到 50.12-50.80,为最佳开源系统。无需再训练即可通过更换词典条目改变输出术语,出现率达 70-97%。

  2. arXiv · cs.AI30

    张量网络 Datamodels(TNDMs)用于训练数据归因

    研究者提出张量网络 Datamodels(TNDMs),用低秩张量网络建模训练单元间的依赖,突破线性 datamodels 只能分配固定贡献、无法表达非可加联合效应的限制。在受控推理任务上,TNDM 仅观察一半训练子集即超越所有基线,TNDM-TT 在观察约 0.0061% 的可能训练子集后将预测 NMSE 较线性 datamodel 降低 89%。在事实关联微调中,单个 TNDM-CP 将留出 R² 从 0.579 提升至 0.668。

  3. GitHub · 3D 生成新仓库24

    BrenoFariasdaSilva 开源 Datasets-Features-Compatibility:CSV 表格数据集特征兼容性分析工具

    BrenoFariasdaSilva 在 GitHub 发布 Datasets-Features-Compatibility 工具包,用于大规模检查和描述 CSV 表格数据集,重点关注数据集内部及跨数据集的特征兼容性。工具可递归发现数据集文件、生成包含样本数、特征类型、缺失值和标签列的元数据,并支持跨数据集特征对比和可选的 t-SNE 可视化。输出写入各数据集路径下的 Dataset_Description 文件夹,项目采用 Apache License 2.0 开源。

  4. GitHub · 3D 生成新仓库45

    imyassmine/rag:基于 Qwen3-0.6B 的开源 RAG 代码库问答项目

    GitHub 仓库 imyassmine/rag 是一个检索增强生成(RAG)流水线,用 AST 感知分块和 TF-IDF/BM25 检索,搭配 Qwen/Qwen3-0.6B 生成有依据的回答,面向约 1,900 个文件的 Python 与 Markdown 代码库(vLLM 源码)。BM25 将标识符拆词并索引文件路径后,代码 recall@5 从 35.4% 提升到 65.7%,docs recall@5 达 79.0%;项目以 CLI 形式提供,并带 recall@k 评测工具。

  5. arXiv · cs.AI19

    SQuIREL:一个在 Wikidata 中测量实体丰富度的上下文相对框架

    SQuIREL 是一种在实体级别测量 Wikidata 丰富度的方法,从语义特异性、限定符密度、内部连通性、引用溯源、外部网络连通性和语言可及性六个维度分别评估。案例研究显示,48% 的巴西油画聚为低丰富度 stub,而法国油画为 0%,并揭示英国与尼日利亚作家间不同的性别差距,可暴露可能指向系统性偏差的表征不平等。

  6. arXiv · cs.CL12

    Ben-Misandry:首个孟加拉语反男性仇恨检测数据集与 Late Fusion Transformer 框架

    研究者发布 Ben-Misandry,首个孟加拉语反男性(misandry)仇恨言论检测数据集,含 5,000 条评论、六个分类,由 GPT-4.1 生成并经人工抽检。在 BanglaBERT 与 XLM-RoBERTa 的 late fusion 集成上达到 96.6% 准确率、macro ROC-AUC 超过 99%,优于最佳单模型(字符级 TF-IDF 线性 SVM 的 91.8%)。作者注明未经显著性检验,数据为合成语料,实际效果有待真实数据验证。

  7. arXiv · cs.CL50

    哪些长文档有用?上下文扩展数据选择的对照研究

    一项对照研究在 Qwen2.5-3B 上以 6B token 持续训练预算比较上下文扩展的长文档选择方法,发现随机采样长文档优于 repacking,而按 LongPPL 关键 token 密度选文档效果更好。其提出的 truncLongPPL 通过截断前缀计算密度,获得 2.28× 端到端评分加速,在验证 HELMET 上超过 random-long 4.54 分、held-out RULER 上 3.28 分。在 Qwen2.5-3B、Qwen3-8B、OLMo 3-7B 的短长混合训练及 SFT 后,该方法的 LongBench v2 提升 1.13–1.67 分、MRCR 提升 0.62–1.44 分。

  8. GitHub · 3D 生成新仓库14

    xilex05/fgai-rnn-text-generation:用 SimpleRNN、BiRNN、LSTM 和 GRU 做词级自回归文本生成

    一个生成式 AI 课程作业仓库用四种循环神经网络(SimpleRNN、BiRNN、LSTM、GRU)在《福尔摩斯冒险史》语料上做词级自回归文本生成,语料含 120,510 个 token、词表 3,158 项。四种模型在相同设置(Embedding 128、Dropout 0.3、Adam 学习率 1e-3)下训练,GRU 全指标最优:验证困惑度 91.52、top-1 准确率 20.02%、top-5 准确率 43.67%。仓库还比较了 0.5、1.0、1.5 三档采样温度对生成连贯性与多样性的影响。

  9. GitHub · 3D 生成新仓库19

    Course-Assistant_MBAX6418:基于混合 RAG 的课程助手仓库

    新开源项目 Course-Assistant_MBAX6418 构建一个课程助手,基于课件材料回答问题并生成练习测验,采用关键词搜索 + 文本嵌入 + 视觉嵌入的混合 RAG 架构,答案附带原始页面/幻灯片图像作为证据来源。目前 PDF/PPTX 解析、BM25 关键词检索与 ChromaDB 语义索引已实现,6 份 PDF(152 页)和 5 个 PPTX(145 页幻灯片)解析完成并经抽查;端到端问答/测验流程尚未集成,测验引擎仍在开发中。

  10. arXiv · cs.CL28

    相反前提翻译出相同结果:面向多语言常识题的源条件诊断方法

    arXiv 论文提出一种源对比诊断方法,用于检验多语言推理评测中翻译前提是否忠实:反转英文前提极性后分别翻译,统计目标语言输出是否完全相同。在 71 组配对题目、五种目标语言、三个翻译 checkpoint 的测试中,Swahili 在每个 checkpoint 的 710 对样本中分别出现 63、113、67 次精确碰撞;在以人类参照校准的阈值下,round-trip NLI 仅通过 NLLB-3.3B 113 次碰撞中的 3 次,LaBSE 则通过 78 次。每次碰撞都证明至少存在一处不忠实翻译,但无法定位具体在哪一侧。

  11. GitHub · 3D 生成新仓库20

    42 School RAG 项目 42-rag:代码库检索与 Recall@k 评估工具

    GitHub 新仓库 42-rag 面向 42 School 的 RAG 项目,提供 index、search、search_dataset 和 evaluate 四个命令,用于对代码库建立 embeddings 并检索来源。评估基于 Recall@k(k=1,3,5,10),项目阈值为 docs 在 Recall@5 达 80%、code 达 50%,官方评分由 moulinette 二进制完成,支持 -t 0.8 的 PASS/FAIL 校验。

  12. GitHub · 3D 生成新仓库30

    gp5-hierarchical-music-generation:分层结构与编曲协同的多轨音乐生成研究仓库公开

    GitHub 新仓库 gp5-hierarchical-music-generation 公开了一项分层结构与编曲协同的多轨音乐生成方法研究,任务为给定 4 小节前文及编曲计划、续写后 4 小节。仓库包含 showcase 作品、和弦对照、27 份 .pt 模型权重(含 SHA256 索引)、核心代码 modules/ 与 results/ 中的实验 JSON,可通过 python verify_package.py 做完整性核验;查看作品无需 GPU,小显卡不运行训练或神经采样。本次发布不含学校登记表和带签名结项报告。

  13. arXiv · cs.CL16

    意大利立法过程:一个统一结构化数据集

    研究者用经人工标注验证的 LLM 抽取流程,把意大利议会非结构化文本转为带日期的有序事件(法案提出、委员会审议、全会审议、批准等),构建了覆盖 1985 至 2026 年、第 IX 至 XIX 届议会全部 5346 部法律、共 101413 个事件的数据集。该数据集可用于计算法律与立法研究及过程导向的数据科学方法。

  14. arXiv · cs.CL22

    弥合学术数据中的语言鸿沟 II:提升中文姓名的性别推断

    研究者针对汉字与拼音两种形式的中文姓名开发性别推断模型,包括输出 0-1 性别分数的回归模型与三分类模型,训练数据来自中文物理出版物的姓名样本,由 11 位母语者标注。回归模型 RMSE 为 0.09、R² 为 0.85,分类模型 macro-AUC 达 0.97;拼音场景通过音译与频率加权聚合汉字预测,并附歧义分数。在对比 Namsor、GPT 和 Claude 三种工具时,模型与人工标注一致性最高,能对 APS 期刊作者样本中每个姓名给出性别,而现有拼音方法有 20%-100% 无法分类。代码与数据已公开。

10月16日周五
  1. arXiv · cs.CL27

    Perceive, Solve, Reason:Time Series-LLM 渐进式能力形成研究

    研究者构建首个覆盖 Perceive、Solve、Reason 三级渐进能力的时间序列-LLM 训练评测套件,含 337K 训练和 44K 评测样本。实验表明专用编码器必不可少:4B 模型在所有感知属性上超越 GPT-4o,而将序列文本化会使推理准确率下降 8–10 个百分点。按序训练的 4B TS-LLM 在无目标域数据情况下,在 8 项域外指标中的 7 项超越四个近期 7B TS-LLM,最高领先 11 个百分点。

  2. arXiv · cs.CL51

    MuninAI:面向独立研究组的自托管科研Agent框架

    Munin是一个开源自托管科研助手框架,可索引研究组文献库和引用图谱,并把任意开放权重模型包装成带阅读、检索和计算工具的智能体。在199组配对文献问题上,框架将基座模型准确率从0.387提升到0.874,而朴素检索式回答在所有测试骨干模型上均低于无辅助模型;移除来源论文后系统在约九成问题上放弃作答,300条伪造引用中未产生虚构的本地引用;断网状态下两个Qwen骨干模型仍超过已发表的PaperQA2准确率,其中gpt-oss-20b可在单张消费级GPU上运行。

  3. arXiv · cs.AI27

    RecReg:基于恢复式屏蔽的强化学习正则安全性质保障框架

    研究者提出 RecReg,一个通过恢复式屏蔽(recovery-based shielding)在强化学习中强制执行非马尔可夫正则安全性质的安全 RL 框架。该框架统一支持不同层级的先验知识与安全保证,论文主要在表格型设定下构建理论基础,提供了相关工作所缺乏的严格安全性与收敛性保证。基于 MASA-Safe-RL 库的大量实验表明 RecReg 学习高效且与理论相符,作者还概述了使用 SOTA model-based RL 扩展到深度 RL 领域的方案。

  4. GitHub · 3D 生成新仓库42

    SYDA:用 AI 生成保持引用完整性的高质量合成测试数据

    新开源项目 SYDA 基于 AI 与大语言模型生成结构化、非结构化、PDF 和 HTML 合成测试数据,并保证外键等引用完整性零孤立记录。它支持 Claude、GPT、Gemini、Grok、Ollama 及 OpenAI 兼容 API,兼容 SQLAlchemy 模式,代码生成模式约 3 次 LLM 调用可生成 10,000 行数据,并提供 CLI 与每表每列成本报告,适用于医疗、银行等受监管行业及软件测试场景。

  5. arXiv · cs.AI39

    面向不完美提示词的设计:基于知识图谱的 LLM 企业数据助手仿真评估

    一项设计科学研究在企业 CFO 单位数据湖的真实部署中发现,业务用户的提示词常缺少 schema 引用和结构信息。研究设计并对比了两种语义中介方案:基于语义相似度的 schema 中介,以及利用从数据湖自动构建的知识图谱的中介。仿真评估结合 LLM-as-a-Judge 与人工验证显示,知识图谱方案在 Precision、Recall、F1 和保留用户意图上均优于 schema 方案。

  6. arXiv · cs.CL18

    MAS-Bai:面向白文白语的自适应多智能体翻译框架

    研究者提出 MAS-Bai,一个面向白文(Bowen script)白语-中文翻译的语言学驱动自适应多智能体框架,针对汉字被语音借用导致的直译幻觉问题,按输入路由至轻量检索翻译路径或含词源与句法智能体的深度语文学路径,并以轻量反向翻译器的 cycle-consistency 作为推理时可靠性信号。团队构建了 6,536 句白语-中文语料,在 1,536 句测试集上 MAS-Bai 达到 16.23 BLEU 和 62.15 COMET,较 Standard RAG 提升 8.11 BLEU 和 6.85 COMET,在语音借词和语序差异场景增益最大。