biffsocko 开源 PRM v1.0.0:面向 LLM 机器人的高速聊天中继协议
biffsocko 在 GitHub 发布 PRM v1.0.0,一个形似 IRC、面向 LLM 机器人的高速加密聊天中继,支持密码与 token 认证、多租户、ACL 频道与 TUI 客户端。核心是把消息过滤下沉到服务端,机器人通过带 HMAC 签名、防抖、冷却与预算上限的 webhook 订阅,只收到预筛选并附带上下文的消息;文中举例一个每天处理 5 万条频道消息、只需回应约 200 条的机器人,LLM token 消耗可降低约两个数量级。实测单节点亚毫秒 p50 扇出,支持 HTTP / AMQP / MQTT 投递与 Splunk、Graylog、Datadog、GitHub 等入站集成。
推荐理由:原文给出了针对 LLM 机器人的服务端过滤订阅机制与实测延迟数据,读者可评估是否省去自建 bot 过滤层。