跳到正文
10月19日周一
  1. Reddit · r/LocalLLaMA32

    别忽视 Nemotron 3.5 Super VL:LocalLLaMA 用户实测冷门知识问答表现最佳

    Reddit r/LocalLLaMA 用户以《Anno 1602》游戏规则等冷门知识(禁用联网搜索)对比 6 个模型,Nemotron 3.5 Super VL 120B-A12B 错误最少,仅出现少量幻觉,其余模型(Gemma 4 31B IT QAT、DeepSeek v4 Flash Vision Exp、Qwen3.5-122B-A12B、Qwen3.8-flash-next、GPT-OSS 120B)均幻觉出错误升级条件或游戏版本。该模型 NVFP4 量化版在双 RTX 5060 Ti 16GB + 双 48GB DDR5-6000MHz 上以 llama.cpp 运行,生成约 8-10 t/s、处理约 150-170 t/s。

10月16日周五
  1. AIHOT · 精选34

    Kling 4.0 凌晨上线,作者实测30秒一镜到底与全能参考表现

    可灵AI凌晨正式上线视频模型 Kling 4.0,作者实测后认为其在大范围动态、复杂动作衔接和全能参考可控性上有扎实进步。新模型支持最长30秒一镜到底直出,首尾帧改为最多10帧多帧参考;1080P 30秒约450积分,720P 20秒的 Kling 4.0 Flash 仅120积分,作者推荐先用 Flash 打样再出片,10-bit 4K HDR 尚未上线。

10月13日周二
  1. GitHub · 去对齐工具与仓库53

    MoonMapBench 发布:逐像素盲测模型月球高程,Claude Opus 5.5 领跑榜单

    aisa-group 在 GitHub 发布 MoonMapBench,用 equirectangular 网格对每个像素中心提问月球高程(米,相对 1737.4 km 参考半径),以 NASA LRO LOLA DEM 为真值计算 MAE。2° 网格低推理档榜单:Claude Opus 5.5 MAE 1,192 m(比常值基线好 28%)、GPT 6 Astra 1,490 m(+10%)、Grok 4.7 1,695 m(−2%)。模型地图能画出月海、Orientale、Crisium 和南极-艾特肯盆地的大致轮廓,但普遍低估背面高地、缺乏陨石坑尺度粗糙度;Grok 4.7 因 refusal 多改用更强制的提示词,并以 --stride 2 只测 4,050 点节省成本(约 $19 vs 约 $75)。

10月11日周日
10月10日周六
  1. GitHub · 3D 生成新仓库20

    josh-q1-ai-image-evaluation:基于问卷对比的 AI 图像模型评测仪表盘

    这是一个本地优先的 AI 图像模型评测仪表盘项目,通过问卷对 12 张 AI 生成的南印度新娘时尚图像做对比评测,涉及 Gemini 2.5 Flash Image、Gemini 3.1 Flash Image 与 Ideogram 3.0 三个模型。架构为 FastAPI + Next.js,私有 CSV 仅在本地用于 pandas 校验与聚合,公开的 survey-aggregates.json 只含聚合数据,供未来 Vercel 部署。OpenAI GPT Image 1 因无法获取未参与测试,仪表盘只展示该状态,不为其打分或排名。

10月9日周五
  1. GitHub · 去对齐工具与仓库53

    TheNomet/ocr-bench 开源:自托管 OCR 与 Claude 等 LLM 的文档读取对比基准

    TheNomet/ocr-bench 在 GitHub 上开源,用带精确 ground truth 的合成挪威文档对比自托管 OCR 模型(默认 baidu/Unlimited-OCR,vLLM 跑在 SageMaker GPU endpoint)与 Claude 等托管 LLM 的文档读取表现,测量速度、准确率和成本。流程分两阶段转录和字段抽取后打分,生成报告和静态站点;整套基础设施从一个 config 文件部署、一条命令销毁,也可指向任意 vLLM 服务器本地运行。MIT 许可。

10月8日周四
  1. GitHub · 去对齐工具与仓库18

    LLMpanorama:用 GEMINI、CLAUDE、CHATGPT 评测下颌阻生智齿分类的牙科 AI 评估工具

    GitHub 开源项目 LLMpanorama 是一个基于 Streamlit 的牙科 AI 评测系统,用于对比 GEMINI、CLAUDE、CHATGPT 三种多模态大模型按 Pell & Gregory 和 Winter 分类法判断下颌阻生智齿的能力,研究包含 129 个病例和 4 名数据录入成员。工具支持自动解析 AI 回复中的 P&G Class、Winter's Class、Confidence (%) 等字段,每 5 分钟自动备份并同步生成 ai_evaluation_results.xlsx。项目可免费部署到 Streamlit Community Cloud,也可本地通过 streamlit run app.py 运行。

10月7日周三
  1. GitHub · 灵魂体仓库31

    llm-counting-benchmark:用视觉大语言模型对 FSC-147 图像做物体计数评测

    llm-counting-benchmark 项目通过 OpenRouter 兼容 API 调用九个视觉模型,对 FSC-147 数据集中选定的六张 Group 1 图像进行计数测试(共 54 个回答),结果于 10 月 3 日保存。基准工作流为 main3.py → eval2/ → 三页网站,模型涵盖 Gemini 3.1 Flash Lite、DeepSeek V4.1 Flash、GPT-5.6 Luna、Claude Sonnet 5.5 等,每模型结果含预测数、置信度、延迟与 API 报告成本。另有 main4.py 比较低/中/高推理档位,目前 GPT-5.6 Sol 已从选定模型中移除。

9月30日周三
  1. Hugging Face Blog70

    Hugging Face 推出 Open TTS Leaderboard:多语言 TTS 与语音克隆的可扩展评测

    Hugging Face 推出面向开源与多语言 TTS 的 Open TTS Leaderboard,用客观指标替代难以扩展的 arena 式人工投票。评测维度包括基于 Qwen3 ASR 的 WER/CER 可懂度、H200 GPU 上的 RTFx 与 TTFA 速度、以及 WavLM 嵌入余弦相似度(SIM)衡量说话人相似度,将单模型评测从数周缩短到数小时。

    推荐理由:用 WER、SIM、TTFA 等客观指标把评测周期从数周缩到数小时,并解释了开源模型在 arena 榜单上代表性不足的原因。