shi3z 发布游戏NPC用本地LLM日语基准 npc-llm-bench
shi3z 在 GitHub 发布 npc-llm-bench,用于定量比较本地LLM作为日语游戏NPC的对话质量与速度,结果收录在 RESULTS.md。基准含73个测试,覆盖日语自然度、人格维持、知识边界、记忆一致性、状态反映、角色差异、诱导耐性和长期对话,并测量TTFT、并发吞吐与VRAM,最终输出加权NPC Score与7种排行榜。
推荐理由:作者给出了游戏NPC场景的73项测试、评分权重和RTX 4090等硬件上的11个模型实测结果,方法可复用。