跳到正文
  1. GitHub · 灵魂体仓库60

    introspection-localization-controls 仓库发布 Llama 与 Tülu-3 句子定位内省测试的 14 项预注册研究

    varchasayya-alt 发布了预注册研究仓库,2026-10-14 至 10-25 在笔记本 CPU 上完成 14 项研究,测试 Llama-3.2-1B/3B、Llama-3.1-8B 与 Tülu-3-8B 阶梯上的句子定位内省任务。核心结论是注入信息的感知信号在包括 base 模型在内的各阶段都存在且线性可解码(probe AUC 约 0.99-1.00),但 8B 模型无法形成显式 yes/no 自我报告,信息提示和拒绝方向消融均未能解锁;研究还发现原协议的定位可被文本损坏解释,换用作者协议后 Tülu-3-8B 在文本完好下定位达 93%。仓库公开全部提交历史作为预注册证据,并提供推荐对照检查清单。

    推荐理由:这项预注册研究用完整提交历史和对照实验检验了句子定位内省测试,还给出了可复用的对照检查清单。

  1. AIHOT · 精选56

    Meta 开源权重模型 Muse Spark Open 在 Fireworks 上线,816B MoE 支持 1M token 上下文

    Meta 的开源权重模型 Muse Spark Open 在 Fireworks 上线,提供 Day-0 serverless 调用。该模型为 816B 参数 MoE 架构,每 token 激活 42B 参数,上下文窗口 1M token,主打长上下文编码与 Agent 工作。

    推荐理由:给出了参数规模、激活参数和上下文窗口等关键配置,读者可据此判断该模型是否适合长上下文和 Agent 场景。

  1. arXiv · cs.CL53

    Muse Glimmer 30B 端侧智能体模型论文发布,Apache 2.0 开源

    论文介绍 Muse Glimmer,一个面向消费级硬件上自主智能体任务的开源 30B 因果语言模型,集多步推理、工具调用与失败恢复于一体,支持文本与图像输入,训练数据覆盖一百多种语言,量化至约 4-bit 可单 GPU 本地推理。作者称其在工具调用、多步规划和智能体任务完成上优于同尺寸的 Gemma4-31B 与 Qwen3.6-27B,模型以 Apache 2.0 许可发布。

    推荐理由:论文给出30B级端侧Agent模型在同尺寸模型上的基准对比,对关注本地部署智能体的人有参考价值。

  2. Hugging Face · 新模型:abliterated70

    BoldingBuilds 发布 Muse Spark Open 816B 的无审查 GGUF 版本

    BoldingBuilds 发布 Meta Muse Spark Open(816B 总参数 / 42B 激活)的无审查 abliterated 版本,直接在 Unsloth UD-IQ1_S GGUF 上原位编辑,全程不做 BF16 反量化。拒绝率从原版 85.06% 降到 1.30%(StrongREJECT 留出集),ForbiddenQuestions 上从 60.00% 降到 0.00%,XSTest 过度拒绝保持 0%,MATH-30 为 25/30 对原版 26/30。方法为对 62 层中第 10-53 块做读写侧投影(λ=1.0,每块单独估计拒绝方向,共 61 个方向),编辑 309 个张量、256 个路由专家未动,λ=0 时输出与输入字节一致作为自检门槛。

    推荐理由:原文给出拒绝率前后对照与逐块方向估计方法,读者可据此判断这个去对齐版本实际去掉了多少、代价多大。

  1. AIHOT · 精选62

    Meta 如何用 AI 原生工程方式开发 Forum 应用

    Meta 工程团队详解把 AI 智能体作为开发流程参与者构建独立 Groups 应用 Forum 的做法,采用 human-on-the-loop 模式并以验证通过的生产级产出衡量成功。Forum 在八周内达到与 Facebook Groups 的核心功能对齐,自主压测循环在开发期发现并修复内存问题,内存占用和缺页约减半,上线后智能体还协助根因分析用户反馈。

    推荐理由:Meta 工程团队复盘了把 AI 智能体纳入开发流程的具体做法,包括 human-on-the-loop 模式和自主压测循环的实际收益。

  2. AIHOT · 精选63

    Meta 开放权重模型 Muse Spark Open 上架 OpenRouter

    Meta 发布开放权重模型 Muse Spark Open,现已在 OpenRouter 上线,定位为面向编码与智能体工作的美国最强开放权重模型。模型总参数 816B、激活 42B,支持 1M token 上下文窗口,原生多模态,支持图像、视频、音频和 PDF 输入,OpenRouter 定价为输入 $1.25/M、输出 $4.25/M。

    推荐理由:原文给出了参数量、激活规模、上下文窗口和 OpenRouter 定价,读者可以直接评估该开放权重模型的部署成本。

  3. Hugging Face Blog75

    Meta 发布开源权重多模态 MoE 模型 Muse Spark Open,约 816B 参数、42B 激活

    Meta 在 Hugging Face 发布开源权重模型 Muse Spark Open,采用 MoE 架构,总参数约 816B、每 token 激活约 42B,支持文本、图像、音频和视频输入,上下文窗口最高 1M token。模型针对 agentic coding 训练,可读代码库、写代码、调试并调用工具;官方给出 transformers、llama.cpp、vLLM、SGLang、MLX 部署配方,BF16 权重约 1.5 TB,NVFP4 版可跑在单节点 B200 上,并用 TRL 在 64 张 H100 上完成 LoRA 微调演示。

    推荐理由:官方博客给出完整架构参数与多套部署配方,从 llama.cpp 量化到 TRL 微调实测数据都有,可按需选路径复现。

  1. Hugging Face · 新模型:uncensored67

    Muse-Glimmer-30B Uncensored 版本发布,基于 Heretic 消融原模型安全对齐

    kmnstudio101 在 Hugging Face 发布 meta-models/Muse-Glimmer-30B 的去对齐版本,使用 Heretic v2.0.0.dev0+custom 消融制作,关键词从 100/100 降至 0/100,KL 散度为 0.0375。模型卡提示安全对齐已大幅削弱,仅供研究与实验使用,避免部署到公开或面向最终用户的服务。

    推荐理由:原文列出了 Heretic 消融参数与关键词、KL 散度的前后对比,读者可以据此判断这个去对齐版本改动程度。

  2. Hugging Face · 新模型:abliterated70

    Muse-Glimmer-30B Heretic Abliterated BF16 v2 发布,拒绝率降至6.5%

    kmnstudio101 发布 Muse-Glimmer-30B-Heretic-Abliterated-BF16 v2,使用 Heretic 工具经 500 次 Optuna 试验完成消融,拒绝率从 v1 的 29% 降至 6.5%,KL 散度为 0.076。消融流程包括跨 52 层计算拒绝方向、LoRA 适配器投影去除拒绝方向并合并回基础权重。BF16 版本约需 55 GB 显存,另有 Q4_K_M 约 16 GB、Q6_K 约 22 GB、Q8_0 约 28 GB 的 GGUF 量化版本,许可证为 Apache 2.0,基础模型为 Meta Muse Glimmer 30B。

    推荐理由:原文给出 v1 到 v2 的拒绝率与 KL 散度对比数据和完整消融流程,读者可据此评估这个去对齐版本的效果与质量代价。

  3. Hugging Face · 新模型:abliterated76

    Muse-Glimmer-30B-Abliterated 发布,移除约87%安全拒绝并放出GGUF量化

    kmnstudio101 发布 meta-models/Muse-Glimmer-30B 的去消融版本,用 KL 约束(λ_KL=1.0)的 BoN 引导 LoRA SFT 将安全拒绝率从 100 降到 13/100,LoRA 仅占参数量 0.10%,随后折叠进基础权重。提供 bf16 两个 safetensors 分片(56 GB)及 Q8_0(28 GB)和 Q4_K_M(16 GB)GGUF 量化,各量化变体的 KL 均值分别为 0.1018 与 0.1444;基准评测按作者要求跳过,能力保留未重测。

    推荐理由:作者公布了完整的KL指标、拒绝率与训练配置,并说明能力未重测,读者可以据此自行评估损失程度。

  1. Hugging Face · 新模型:abliterated62

    sbussiso 发布 Llama-3.2-1B-Instruct-abliterated 去对齐权重

    sbussiso 在 Hugging Face 发布 Llama-3.2-1B-Instruct 的 abliterated 版本,通过对 untied lm_head 权重做读出空间正交化使去拒绝编辑持久化,推理时无需 hook。

    推荐理由:原文给出五组对照的拒绝率与 MMLU 损失数据,读者可以据此判断这个持久化去对齐编辑的实际代价。

  1. Ollama Blog75

    Meta Superintelligence Labs 首个开放模型 Muse Glimmer 上架 Ollama

    Meta Superintelligence Labs 首个发布的开放模型 Muse Glimmer 现已登陆 Ollama。该模型为 30B 多模态模型,专为本地运行的 Agent 工作负载构建,支持 128K+ 上下文,采用 Apache 2.0 许可证。

    推荐理由:官方说明了在 Ollama 上运行该模型的具体命令、MLX 引擎的 DFlash 加速倍数和图像输入用法,可直接照做。

已经到底了