跳到正文
Hugging Face · 新模型:uncensored·· 7 天前AI 评分18

A0Sh 发布 WizardLM-7B-Uncensored 的 Q2_K GGUF 转换版

A0Sh/WizardLM-7B-Uncensored-Q2_K-GGUF

来源与原文

Hugging Face · 新模型:uncensored

发布时间:(北京时间)

阅读原始来源 · huggingface.co ↗
完整链接与内容说明

https://huggingface.co/A0Sh/WizardLM-7B-Uncensored-Q2_K-GGUF

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

A0Sh 将 QuixiAI/WizardLM-7B-Uncensored 通过 llama.cpp 的 GGUF-my-repo 转换为 Q2_K 量化 GGUF 格式并发布在 Hugging Face。该模型可用 llama-cli 或 llama-server 直接加载,server 示例使用 -c 2048 上下文长度,并支持通过 LLAMA_CUDA=1 等编译选项在 Nvidia GPU 上运行。

来源:Hugging Face · 新模型:uncensored · huggingface.co