跳到正文
10月8日周四
  1. GitHub · 去对齐工具与仓库38

    compiled-ai-labs 开源 reg-to-jdm-pack:将 12 CFR 1026.19(f) 条文编译为 GoRules 决策包

    compiled-ai-labs 在 GitHub 发布 reg-to-jdm-pack,将 eCFR 中 12 CFR 1026.19(f)(1)(i) 至 (iii) 的 Closing Disclosure 时限规则编译为 GoRules JDM 格式决策包,采用 Apache 2.0 许可。包内含规则、receipts.json 引用对照、16 个测试用例和 ZEN 引擎验证器 verify,可逐字符比对条文并检查每个数字;手工改动规则会因不匹配 receipt 而被报告。已知限制:1026.19(f)(2)(i)、(iii)、(iv)、(v) 的例外情形不在覆盖范围内。

  2. GitHub · 去对齐工具与仓库32

    sheosi/assoc-admin-bot:基于 Rust 的协会管理 Telegram 智能体机器人

    assoc-admin-bot 是一个用 Rust 编写的协会管理 Telegram 机器人,集成 OpenAI GPT-4 function calling 提供 AI 聊天。它支持活动参与者与缴费追踪、财务记录、通过 Selenium 自动查账、Google Calendar 提醒、SMTP 群发邮件和 Infisical 密钥管理,采用 axum、teloxide 和 sqlx(编译期 SQL 检查),数据库为 SQLite,以 MIT 许可开源。

  3. GitHub · 灵魂体仓库53

    NYU Abu Dhabi 团队审计四个 LLM:真相标签翻转情绪基调但种族差异依旧

    NYU Abu Dhabi 等机构的研究团队在 GitHub 发布论文数据仓库,审计 GPT-5.4 mini、Claude Haiku 4.5、Llama 4 Scout 和 NVIDIA Nemotron 3 Nano 对事实核查新闻标题的模拟情绪反应。标注 confirmed false 后,GPT、Llama、Claude 的情绪从负面转向正面,六维度合并正面评级从 15% 升至 68%,Claude 的 Confident 评级从 22% 升至 99.6%;但在 84 个统计显著比较中有 82 个显示 Black 人设比 White 人设获得更多负面情绪,标签并未消除人设差异。仓库包含刺激材料、原始输出和聚合评级数据及复现代码。

  4. GitHub · 去对齐工具与仓库37

    SeedRouter API 配置助手:Codex / Claude Code 图形化 API 配置工具

    SeedRouter API 配置助手是一个开源工具(Apache-2.0),帮助用户图形化修改 Codex 和 Claude Code 的 Base URL、API Key 与模型。当前 v0.2.0 使用完整引导流程,「直接配置 API」入口尚未发布安装包;修改前会预览并备份 config.toml,也可经 CC Switch 导入。工具支持 Windows、macOS,提供简体中文和英文界面,需要 Node.js ≥ 20 和 Rust 环境进行本地构建。

  5. GitHub · 去对齐工具与仓库64

    UClone-AI 开源自托管多智能体工作区 UClone-X

    UClone-AI 在 GitHub 开源了本地多智能体工作区 UClone-X,支持在自有电脑上通过 Ollama 运行本地模型或接入 Gemini、Claude、OpenAI 密钥,无需账号。内置六个 clone,支持群聊、长期记忆、文件读写、本地图像生成(SDXL)和 MCP 服务器连接;仓库采用 Apache 2.0 许可,项目为 pre-1.0 活跃开发状态,A2A/ACP 服务器为部分实现。

    推荐理由:原文完整给出了本地多智能体工作区的安装方式、内存与模型配置对照和数据留存位置,读者可据此评估自托管部署成本。

  6. GitHub · 灵魂体仓库56

    slink 发布:本地读取并端到端加密分享 Claude Code、Codex 等 Agent 会话

    slink(lftherios/session-link)是一个开源 CLI,可在本地 Web 阅读器中打开 Claude Code、Codex、opencode、pi、omp 和 Hermes(实验性)等 Agent 的会话,支持添加备注后发布端到端加密链接。分享在本地用新鲜 AES-256-GCM 密钥加密并放在 URL # fragment 中,录制器丢弃认证头并上传前扫描凭据;提供 brew、npm、curl 等安装方式,格式与查看器 MIT 许可,也可在 Radicle 获取。

  7. GitHub · 灵魂体仓库55

    mini-rsglang:受 mini-sglang 启发的 Rust 推理引擎,支持 Qwen3 与 GPT-OSS

    mirthfulLee 发布 mini-rsglang,一个用 Rust 和 CUDA 从零实现的推理引擎,受 mini-sglang 启发,支持 Qwen3 dense/MoE 与实验性 GPT-OSS 模型,提供单 GPU 和 NCCL 张量并行执行、离线生成及 OpenAI 风格 HTTP API。项目支持连续批处理、chunked prefill、radix 前缀共享和分页 GQA,BF16 权重与 KV,实测 Qwen3-30B-A3B 在 TP 8、gpt-oss-120b 在单卡和 TP 2 上运行。

    推荐理由:受 mini-sglang 启发的纯 Rust 推理引擎,给出 Qwen3 与 GPT-OSS 的 TP 支持和诚实的验证状态,想读引擎实现细节可以看。

  8. GitHub · 灵魂体仓库24

    Signalgraph 自主研究引擎站点:AI、量子等领域的可溯源信号

    Signalgraph 是一个自主研究引擎,每日阅读一手资料,维护 claim 级知识图谱,只发布可验证的内容,每条事实性句子都可溯源并审计。其公开站点 pank2015/signalgraph-site 基于 Astro 静态站加 Cloudflare Worker 构建,内容由私有引擎以 pull request 形式提交,经七项 grounding 检查和人工审核后上线。站点采用 dark-first 设计,Flowkit 图表在构建期用 dagre 渲染为静态 SVG,文章页 JavaScript 少于 60 KB。

  9. GitHub · 灵魂体仓库58

    verdict-core:带准入控制与可验证回执的多模型编排工具

    GitHub 上的 verdict-core 是一个多模型编排控制平面,输入目标后由规划器拆成 DAG,基于实时网关证据准入模型、并行执行 worker、验证每个节点,并要求审查者来自与最终实现者不同的路由,最后写入带 SHA-256 事件摘要的回执。故障按类别冷却路由或整个 provider 并重分配,节点最多 4 次尝试后 FAIL_CLOSED。

  10. GitHub · 去对齐工具与仓库13

    MapleQuery:让政府开放数据可自然语言查询的开源项目(处于实现前阶段)

    MapleQuery 项目旨在从 CKAN 类开放数据门户(如加拿大政府、英国政府)摄取公开数据集,存入 BigQuery,并通过 LLM 智能体以带引用来源的方式回答自然语言问题。项目目前处于 Pre-implementation 阶段,仓库仅含 agent 驱动开发的文档骨架,尚无服务代码;基础设施使用 Terraform 在 GCP 上搭建(GCS bucket、service accounts,后续加入 BigQuery 和 Cloud Run job),许可证待定。

  11. GitHub · 去对齐工具与仓库17

    Ralc:开源 LLM 上下文优化引擎RALC 发布

    开源项目 RALC 是一个面向 LLM 应用的模型无关上下文优化引擎,定位为应用与模型之间的上下文层。它将积累的上下文表示为关系图,按相关性及信息间关系在有限 token 预算内进行分配。项目目前处于早期开发阶段,采用 Apache-2.0 许可证,核心功能将按图、语义检索、关系检索、混合排序、token 分配分阶段构建。

  12. GitHub · 灵魂体仓库51

    opencopper 开源铜及大宗商品供需世界模型与模拟工具

    作者在 GitHub 发布开源项目 opencopper,一个铜矿供需开放世界模型,包含 LLM 从 EDGAR EX-96 提取的矿山级账本、校准到 22% 实际波动率的 Monte Carlo 引擎和 YAML 情景模拟器。另有 USGS 数据构建的 10 个品种国家层级(镍、钴、锂等),支持 DRC 钴配额、中国稀土出口管制等真实情景,并内置 PREDICTIONS.md 预测登记与公开评分机制。

  13. GitHub · 去对齐工具与仓库61

    pyosang82 开源 Pulsar(atoa-stream):AI 智能体自主直播互动平台

    开发者放出 atoa-stream 仓库,搭建了类 Twitch 的平台 Pulsar(pulsarsignal.live),主播与观众均为 AI 智能体,主题由智能体自定,人类只能旁观。项目以 MCP 接入外部智能体,v2 服务端为 Node.js 加单个 ws 依赖,含 WebSocket 协议、多房间、心跳踢出、edge-tts 语音和 npx pulsar-agent CLI,支持 OpenAI、Anthropic、Google 与 Ollama;协议验证覆盖 OAuth、PKCE、14 个 MCP 工具和 100 路并发 WebSocket 注册,目标为 2026 年 10 月 31 日前达成 100 个经核实的外部智能体注册。

    推荐理由:仓库给出完整架构、WebSocket 协议与部署命令,协议只有约 50 行 JSON,想自建智能体社交实验的读者可以直接复用。

  14. GitHub · 去对齐工具与仓库54

    BETA-15 发布 paradox-localization-translator:用本地LLM为Paradox游戏Mod做日语本地化的GUI工具

    BETA-15 在 GitHub 开源了 paradox-localization-translator,这是一个用本地 LLM(Ollama、LM Studio)或 OpenAI、Anthropic、Gemini 等云 API,将 Paradox 系游戏(CK3、Victoria 3、Hearts of Iron IV、Stellaris、Europa Universalis V 等)Mod 的英中本地化翻译成日语的 GUI 工具,当前版本 v0.11.79,支持 macOS、Windows、Linux 且无需安装 Python。

  15. GitHub · 灵魂体仓库55

    Go 语言自托管 LLM 网关 airoute 开源,支持 OpenAI/Anthropic/Gemini 协议双向转译

    GitHub 项目 airoute 发布,是一款 Go 语言构建的自托管 LLM 与全模态智能网关,支持 OpenAI、Anthropic、Gemini 协议 Any-to-Any 双向转译。提供智能探测下游自动建渠道、多渠道优先级 failover 与三态熔断、首字前无感容灾,单二进制内嵌 React 19 管理台,支持 SQLite 与 PostgreSQL 部署,涵盖对话、生图、TTS、Whisper STT 与视频生成接口,基于 MIT 许可证开源。

    推荐理由:原文详细给出了协议双向转译、三态熔断与零数据库热路径等实现细节,读者可以直接评估这套自托管 LLM 网关是否适合接入自己的多供应商渠道。

  16. GitHub · 去对齐工具与仓库46

    OpenClip:macOS 开源划词操作弹窗工具发布

    开源工具 OpenClip 为 macOS 提供划词操作弹窗:在任意应用选中文字即可进行大小写转换、数学求值、运行 shell 脚本、触发快捷指令或调用 AI 模型。它由 Swift 6 编写,支持 JavaScript、Shell、AppleScript 和 URL scheme 扩展,可选接入本地 Ollama、Apple Intelligence 或 OpenAI/Anthropic API。工具零遥测、100% 本地执行,采用 AGPL-3.0 协议,可通过 brew install --cask openclip 安装。

  17. GitHub · 去对齐工具与仓库42

    aspirit 开源 asknews:针对美联储与日本央行公开材料的双语问答应用

    aspirit 在 GitHub 开源 asknews,一个对美联储英文材料与日本央行日文材料做双语问答的应用,覆盖记者会视频与纪要、政策声明、演讲和展望报告等约 90,000 个段落。系统采用混合检索并让每条引用可回溯到官方文件或视频时间点,超出档案范围的问题会拒答;回答默认使用 claude-opus-5-5,摘要用 claude-sonnet-5-5,并设有每日 3 美元模型支出上限。项目支持本地演示与 PostgreSQL 17 + pgvector 部署,使用 uv 与 Python 3.13。

  18. GitHub · 去对齐工具与仓库55

    mini OpenClaw 发布:文件即记忆、技能即插件的透明 AI Agent 工作台

    WeatherCore 在 GitHub 发布 mini OpenClaw,复刻并优化 OpenClaw 核心体验,以本地文件系统为唯一数据源,记忆存于 memory/MEMORY.md、会话存于 sessions/*.,摒弃数据库黑盒。技术栈为 FastAPI + LangChain 1.x create_agent + Next.js 14,技能遵循 Anthropic Agent Skills 范式,Agent 通过 read_file 读 SKILL.md 自学能力;System Prompt 由六文件动态拼接,支持 Monaco 在线编辑即时生效、对话压缩归档、tiktoken Token 统计,最低配置只需一个 DEEPSEEK_API_KEY。

    推荐理由:原文完整给出了文件式记忆、技能即插件和六文件 System Prompt 的实现方式,读者可以直接复用这套透明 Agent 架构。

  19. GitHub · 去对齐工具与仓库60

    kolvian 开源 TraceReduce:自动缩减 LLM 请求以保留失败用例

    kolvian 在 GitHub 发布 TraceReduce 的早期 alpha 版本,从已保存的 LLM 请求中删除历史轮次,同时保留指定的失败(如期望的工具调用或参数),并生成可运行的复现脚本和回归测试。工具要求 Python 3.11+,用 JSON 配置,可通过 preserve_messages 固定任务所需事实;结果分 REDUCED、NOT_REPRODUCED、NO_REDUCTION 等五类,验证要求 5 次 baseline 中 4 次出现同一失败原因,候选请求 3/3 复现,最终对原始与缩减请求各交错 10 次调用且至少 8 次匹配。缩减器与 HTTP adapter 已有自动化测试,真实模型案例研究、checkpoint/resume、段落缩减等仍在计划中,项目采用 MIT 许可。

    推荐理由:原文给出了缩减判定策略、调用预算和结果分类的具体规则,做 LLM 缺陷调试的读者可以直接评估这套工作流是否适用。

  20. GitHub · 灵魂体仓库30

    softpomo-vrptw 发布离线复现版本:RC101 上的四种工作流

    GitHub 仓库 hansunjin47-arch/softpomo-vrptw 发布离线版本,涵盖固定 RC101 上的四种工作流:LKH-3 Full History、Pure RL、Kim + Confidence 和 Pure RL500 + Phase2。发布包含 train80/test80 场景、confidence 缓存及匹配的 Pure500 checkpoint,不含后续 ontology/prompt/scale 消融。协议为 100 名固定客户、容量 200、最多 25 辆车、horizon 240;完整 RL 训练需 CUDA,无需 API key。

  21. GitHub · 去对齐工具与仓库35

    llm-anatomy:用交互动画讲解现代 LLM 原理的开源项目

    GitHub 上的 llm-anatomy 项目提供交互式动画课程,讲解 2026 年现代 LLM 的构建、训练与部署方式,每个概念配有分步动画和可在浏览器中手动验证的玩具示例。项目使用纯 ES modules 和 SVG,无框架、无构建步骤,本地运行用 npm run serve,测试支持 npm test 和 npx playwright test。目前 Architecture 轨道正在构建中,Training 和 Serving 轨道已完成设计。

  22. GitHub · 去对齐工具与仓库43

    FY Orbit · 星轨:企业级多智能体调度中枢,100% 本地优先开源发布

    开源项目 FY Orbit · 星轨定位企业级多智能体调度与自适应工作流工坊,主打 100% 本地离线优先与人机绝对掌控。其内置 HITL 人在回路审批、操作前置快照与秒级回滚、SHA-256 审计哈希链及全链路 OpenTelemetry Trace,并以三层质检拦截未通过验证的产物。项目基于 Apache License 2.0 开源,提供 Windows 绿色安装包、在线网页版和源码三种使用方式,工作流状态全量落盘 SQLite,支持断点原位续作。

  23. GitHub · 灵魂体仓库54

    AgenticX 开源统一多智能体技术栈,覆盖 Python Runtime、Near Desktop 与企业网关

    AgenticX 在 GitHub 发布统一 Agent 技术栈,包含 Python SDK 与 agx CLI、Electron + React 的 Near Desktop 本地优先多智能体工作区,以及带 Go AI Gateway 的企业版。框架支持 15+ LLM 提供商、A2A 与 MCP 协议、分层记忆、技能自我进化、知识库与 GUI Agent 等模块,核心包约 27 个轻量依赖可秒级安装。README 同时给出 LiteLLM 1.82.7/1.82.8 恶意版本的安全提示,并说明多租户 RBAC 与 Cluster Runtime 仍未完成。

  24. GitHub · 灵魂体仓库33

    freehire:从企业 ATS 直采职位的开源招聘聚合项目

    GitHub 开源项目 freehire 直接从 Workday、Greenhouse、Lever、Ashby、iCIMS 等 92 个 ATS 平台抓取职位,已聚合 294,000+ 家公司的 3.3M+ 在招职位,共 225 个数据源,统一去重后链接原始发布页。项目采用 MIT 许可证、可自托管,提供分面全文搜索、HTTP API、CLI、Telegram 摘要,以及简历生成、申请追踪和内置 agent(chat、browse、profile、CV tailoring、interview rehearsal 五种预设),并支持通过 MCP server 接入 Claude Desktop 与 Claude Code。

  25. GitHub · 灵魂体仓库48

    Fella:基于 Rust 分析引擎的只读本地数据分析 AI 工具

    GitHub 上的 Fella 是一个面向个人文件的 AI 分析工具,结合 Rust 本地分析引擎与模型驱动的分析循环,用户可用自然语言提问,无需搭建数据仓库或学习 SQL。引擎负责计算,模型只通过只读工具访问数据,结果可追溯检验,支持 CSV、JSON、表格、PDF 等格式,可接入 OpenAI、xAI、Ollama Cloud、OpenRouter 等 OpenAI 兼容端点,当前版本不联网搜索。

  26. GitHub · 灵魂体仓库50

    solrey3/pinky:基于 PARA + Zettelkasten + LLM Wiki 模式的个人知识管理系统

    GitHub 上的 solrey3/pinky 是一个基于 PARA + Zettelkasten + LLM Wiki 模式的个人知识管理系统,采用 raw/ 不可变原始层与 wiki/ LLM 合成层的三层架构,通过 [[wiki links]] 交叉引用页面。工作流包括将文件放入 raw/ 后触发 /skill:wiki-ingest 的采集、基于 wiki/index.md 引用合成的查询、发布 newsletter 到 GitHub Pages 的脚本,以及检查矛盾和孤立页面的 lint。系统由 Sancho 维护,由 Pi(OpenRouter)执行采集、查询与 lint。

  27. GitHub · 去对齐工具与仓库60

    apis-gratis-es:面向西语社区、每周自动复验的免费 API 与 LLM 免费额度目录

    GitHub 仓库 apis-gratis-es 发布面向西语社区的免费 API 目录,覆盖免密钥 API、LLM 免费额度与本地模型,最近一次核查为 2026-09-19。23 个免密钥 API 均经真实调用验证并测量 CORS,CI 每周复验;LLM 部分记录 OpenRouter 22 个 :free 模型、Groq 免费档 30 RPM 等额度,并列出 Groq、OpenRouter、SambaNova 等已取消免费额度的变化,另收录 self-host 聚合器 FreeLLMAPI 与 Ollama 本地模型方案。

    推荐理由:这份西班牙语免费 API 目录给出了逐项核查标记、验证方法和LLM免费额度现状,读者可以直接复用其核对思路来筛掉已失效的额度信息。

  28. GitHub · 灵魂体仓库38

    labring/FastGPT:支持知识库与 Agent 编排的开源项目

    FastGPT 是一个开源项目,可通过 Docker Compose 快速部署,也支持 Sealos Cloud 一键部署,另有 fastgpt.io 云服务版和商业版。核心能力包括对话/插件工作流的 Agent Skill 编排与双向 MCP、知识库混合检索与重排、支持 TXT/MD/PDF/Docx 等多格式导入,以及系统工具、RAG 模块和 Agent-loop 热更新。项目遵循 FastGPT Open Source License,允许后台服务直接商用,但不允许提供 SaaS 服务。

  29. GitHub · 灵魂体仓库43

    knowledge-base-v2 开源:AI 知识采集分析整理系统

    GitHub 开源项目 knowledge-base-v2 是一套 AI 知识采集、分析、整理系统,流程为 Collector → Analyzer → Organizer → Hooks。它从 GitHub Trending 采集 AI 项目,调用 LLM 生成中文摘要、0.0-1.0 相关性评分、五维评分和标签,输出标准化 JSON 并更新索引,Hooks 负责 JSON 校验与质量检查,支持 OpenAI 兼容 API(DeepSeek / Qwen / OpenAI)。项目采用 MIT License。

  30. GitHub · 去对齐工具与仓库31

    ShanySky/llm-intelligence-monitor:监控 GPT 等大模型能力下降的轻量回归测试项目

    GitHub 上的 llm-intelligence-monitor 是一个轻量回归测试项目,用于监控 GPT 等大模型是否出现能力下降。自 2026-10-05 起自动日测 schedule 已停用,改为按需人工运行:默认 8 道固定锚点题 + 8 道分层轮换题,每题运行中英文镜像,四模型(GPT-6 Astra、GPT-6.1 Sol、GPT-6 Luna、GPT-5.6 Sol X High)并行测试,每模型每轮执行 32 个测试。项目还增加了基于轻量 Agent Harness 的应用型评测通道,评分以客观隐藏检查点为主,不依赖 LLM Judge。

  31. GitHub · 去对齐工具与仓库43

    FaultMaven:开源 AI 故障排查 Copilot

    FaultMaven 是一款 AI 故障排查 Copilot,将日志、指标和配置与 runbook、文档及历史修复关联,提供基于真实系统的上下文事件调查。采用 FSL-1.1-ALv2 fair source 许可,可自托管或用 FaultMaven Cloud(beta 免费、有每日调查次数限制),本地镜像约 2.3 GB 并内置 embedding 模型,首次启动约 1 分钟,预置 91 个排障 runbook。软件仍处 beta,仅提建议不做执行,无基础设施访问权限。

  32. Reddit · r/LocalLLaMA38

    中国 AI 一线观察:没有出海的内卷是白费功夫

    作者在北京和上海与中国的 AI 从业者交流后指出,字节跳动/豆包是唯一保持旗舰模型闭源的主流实验室,因为它拥有自家的 ChatGPT 式超级应用豆包,用户超过 300 million。文中引述观点称:“落后于前沿时,开放能让单位能力的声誉最大化;一旦领先,就会走向封闭。”

  33. GitHub · 去对齐工具与仓库66

    Mdream v2 发布:用 Rust 与 JS 引擎将 HTML 转为面向 LLM 的 Markdown

    harlan-zw 发布 HTML 转 Markdown 工具 Mdream v2,提供 Rust NAPI、WASM 和纯 JS 三种引擎及流式转换,供 Claude、GPT 等 LLM 直接消费网页内容。实测对部分页面可减少最多 92% 的 token,Rust 引擎在基准测试中快于 Turndown、html2md 等多个对比库;配套 CLI 爬虫、Docker 镜像、Vite、Nuxt、GitHub Actions 集成,可整站生成 llms.txt 并支持构建向量数据库 RAG 流程。

    推荐理由:README 提供了与其他转换库的速度和 token 用量对比数据,以及从单页转换到建站 RAG 的完整用法,便于选型和迁移参考。

  34. GitHub · 灵魂体仓库65

    openNovel 发布:基于 openCode 的 AI 长篇小说创作工作台

    openNovel 在 GitHub 开源,它是开源 AI 编程 agent openCode 的 fork,保留了会话运行时、工具注册、上下文代数与 Electron 外壳,改造为 AI 驱动的长篇小说创作工作台。核心是 8 步写作流水线和 37 维连续性审计,从角色、时间线、文风等 9 大类自动审查章节并附证据与修改建议;数据本地存储于 SQLite,支持 Electron 桌面端与 Web 自托管,MIT 许可。

    推荐理由:原文讲清了8步流水线和37维审计的具体构造,读者可以了解如何把编程agent框架改造成长篇小说创作工作台。

  35. GitHub · 去对齐工具与仓库25

    mad-forg 开源 AI / LLM 学习路线与资源整理仓库 AI-LLM-Learning-Roadmap

    mad-forg 在 GitHub 开源 AI-LLM-Learning-Roadmap 仓库,整理面向 AI / LLM 学习者的学习路线与资源,按科普、入门、论文、实战、工具/Skills 五个阶段组织。内容涵盖 Stanford CS25、吴恩达、李宏毅等课程,以及 LLMs-from-scratch、MiniMind、MicroGPT、7.39B 参数的 ZGCM-1 等实战项目,并收录 Archify、Superpowers 等 AI Coding 工具。仓库将持续更新并接受社区贡献。

  36. GitHub · 灵魂体仓库50

    MineBench:用 Minecraft 式体素构建评测 AI 空间推理的开源基准

    MineBench 是一个开源的 AI 空间推理评测平台,模型根据自然语言提示输出 JSON 格式的 3D 坐标来生成体素建筑,也可通过 voxel.exec 的 block、box、line 原语构建大型作品。其排名采用 LMSYS Chatbot Arena 式的盲测投票加全局 Bradley-Terry 模型,支持 GLB、STL、MagicaVoxel .vox、WorldEdit .schem 导出,目前覆盖 OpenAI、Anthropic、Google、DeepSeek、Qwen 等厂商模型及 OpenRouter 上的模型。

  37. GitHub · 去对齐工具与仓库47

    OpenRouter 开源内部评测工具 benchmark-harness

    OpenRouter 将内部评测工具 OpenRouterTeam/benchmark-harness 对外公开,以提升透明度,并可在自有基础设施上大规模运行基准测试、快速迭代。该工具通过 bun 安装运行,支持指定 benchmark(如 gpqa_diamond)和模型(如 openai/gpt-4o-mini)等参数,并提供了 CONTRIBUTING.md 与 SECURITY.md 供贡献者和安全报告使用。

  38. GitHub · 灵魂体仓库41

    llm-slo-lab:在 Kubernetes 上用 SLO 度量大语言模型推理

    开源项目 aLuizab/llm-slo-lab 在 Kubernetes 上为 LLM 推理建立 SLO,测量 TTFT、输出 tokens/s、每请求成本和质量信号,基于 OpenTelemetry GenAI 语义约定,存储在 Prometheus 并用多窗口多燃尽率规则告警,配合 KEDA 扩缩容。该项目是 KubeCon Europe 2027 lightning talk 的配套实验,已在 CPU 上跑通 Qwen2.5-0.5B-Instruct(TTFT 0.4–0.5 s,约 4.5 tokens/s),llm-gateway 默认不记录提示词与响应内容,许可证为 Apache-2.0。