跳到正文
GitHub · 灵魂体仓库·· 18 天前精选AI 评分55

persona-code-llms 复现包发布,测量人格系统提示词对 LLM 代码任务的影响

lapatradaa/persona-code-llms

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/lapatradaa/persona-code-llms

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

lapatradaa 在 GitHub 发布 persona-code-llms 复现包,用 99 个人格加 1 个无提示词基线共 100 个系统提示词,对 Qwen3-Coder-Next、DeepSeek-V4-Flash、GPT-5.1-Codex-Mini 三模型在 bug 检测、漏洞检测和 CVE 描述生成上做单属性扫描,共 563,400 次 API 调用。结果显示人格基本不改变 RQ1/RQ2 准确率,但显著改变答案稳定性,DeepSeek 在 RQ1 只保留 61% 基线答案,Qwen 在 RQ2 有 38/99 个人格显著低于基线,人格还普遍使 CVE 描述变长。

推荐理由

原文给出完整的实验设计、样本数和显著性检验结果,想了解人格提示词对代码任务实际影响幅度可直接查表复用。

来源:GitHub · 灵魂体仓库 · github.com