阿拉伯法律LLM压缩与评测研究
热点事件持续更新
阿拉伯法律LLM压缩与评测研究
1 篇报道1 个报道来源20 小时前更新
先了解这件事
AI 综述
研究者在沙特阿拉伯语法律基准 ArabLegalEval 上,分别在提供法律条文上下文与无上下文两种协议下评测 FANAR-9B、JAIS-8B、Qwen2.5-7B 的领域适配、量化和蒸馏。结果显示,移除上下文会使基座模型准确率差距最高达 27 个百分点;4-bit 量化将模型内存降低 64-71%,无上下文选择题准确率变化在 -3.2 至 +1.6 个百分点之间。 蒸馏结果波动更大:由 FANAR 蒸馏出的 Qwen2.5-7B 学生模型无上下文准确率为 76.6%,其教师模型为 77.2%。
AI 根据报道生成 · 5 小时前更新
最新进展11月5日 21:15
从上下文视角看压缩:评估阿拉伯语法律 LLM 的领域适配、量化与蒸馏报道时间线
沿着报道,了解事件的不同侧面。
11月5日
- arXiv · cs.CL从上下文视角看压缩:评估阿拉伯语法律 LLM 的领域适配、量化与蒸馏
研究在沙特阿拉伯语法律基准 ArabLegalEval 上,分别在提供法律条文上下文与无上下文两种评测协议下考察 FANAR-9B、JAIS-8B、Qwen2.5-7B 的领域适配、量化和知识蒸馏效果。移除上下文会使基座模型准确率差距最高达 27 个百分点;4-bit 量化将模型内存降低 64-71%,无上下文 MCQ 准确率变化在 -3.2 至 +1.6 个百分点之间。蒸馏结果波动更大,由 FANAR 蒸馏出的 Qwen2.5-7B 学生模型无上下文准确率为 76.6%,其教师模型为 77.2%。
本事件热度走势
- 可比范围当前
- 6
- 可比范围峰值
- 611月6日 13:00
- 近 24 小时变化
- –
02468
13:0014:0015:0016:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。