发布 Local Token Visualizer：离线统计 LLM token 的 VS Code 扩展
先了解这件事
MISTYEYE2088 在 GitHub 发布 VS Code 扩展 Local Token Visualizer，可在本地离线统计并高亮当前编辑器文本的 LLM token。据其说明，编辑内容不外传，唯一网络访问发生在用户选择下载 tokenizer 时访问一次 huggingface.co。 扩展内置 GPT-4o（o200k_base）、gpt-oss（o200k_harmony）、Gemma 4 三种 tokenizer，可按需从 Hugging Face 下载 Llama 3.1、Qwen 2.5、DeepSeek V3、Mistral v3 等。由于 Anthropic 和 Google 未公开 Claude 3+ 与 Gemini 的 tokenizer，相应计数需用官方 API 或以 Gemma 4 近似。
AI 根据报道生成 · 21 小时前更新
报道时间线
沿着报道，了解事件的不同侧面。
- GitHub · 灵魂体仓库Local Token Visualizer：离线统计与可视化 LLM token 的 VS Code 扩展
Local Token Visualizer 是一款 VS Code 扩展，可在本地离线统计并高亮当前编辑器文本的 LLM token，内置 GPT-4o（o200k_base）、gpt-oss（o200k_harmony）、Gemma 4 三种 tokenizer，还可按需从 Hugging Face 下载 Llama 3.1、Qwen 2.5、DeepSeek V3、Mistral v3 等。编辑内容不外传，仅在选择下载 tokenizer 时访问一次 huggingface.co。由于 Anthropic 和 Google 未公开 Claude 3+ 与 Gemini 的 tokenizer，相应计数需用官方 API 或以 Gemma 4 近似。
本事件热度走势
- 可比范围当前
- 5
- 可比范围峰值
- 1010月26日 12:00
- 近 24 小时变化
- –
趋势仅比较持续完整观测到的相同主体，范围可能小于当前热度统计。移动指针或点击图表查看每小时热度；键盘可用左右方向键切换。