VocabX预览：特化词表降推理成本77%
先了解这件事
Dharma-AI 在 Hugging Face 博客中预告了即将发布的 VocabX 论文，称在不更换基座模型、数据和训练配方的前提下，通过重建词表，把生产环境作文评分器的实测推理成本降低 77.0%。该评分器基于 Qwen3-4B，原本沿用为多语言通用文本构建的 151,669 条词表，导致重复的 JSON 结构和评估短语被切成多个 token，且每生成一个 token 都要对全部词表打分。 VocabX 按 token 所在字段的成本而非出现频率选择词条，同时在子词层重建切分方式、在多词层把重复片段合并为 macro token，并用五个 miner 搜索长词、整行、短语、完整句子和带标点的结构。 Dharma-AI 称，上述数字来自仍在评审中的论文当前版本，发表前可能变化；完整方法、各实验表格及被弃用的干预方案将在即将发布的 VocabX 论文中给出。
AI 根据报道生成 · 3 小时前更新
报道时间线
沿着报道，了解事件的不同侧面。
- Hugging Face BlogVocabX 如何通过专用化词表将小模型推理成本降低 77%
Dharma-AI 在 Hugging Face 博客中预告了即将发布的 VocabX 论文，称在不更换基座模型、数据和训练配方的前提下，通过重建词表把生产环境作文评分器的实测推理成本降低 77.0%。该评分器基于 Qwen3-4B，原本沿用为多语言通用文本构建的 151,669 条词表，导致重复的 JSON 结构和评估短语被切成多个 token，且每个生成 token 都要对全部词表打分。VocabX 按 token 所在字段的成本而非出现频率选择词条，同时在子词层重建切分方式、在多词层把重复片段合并为 macro token，并用五个 miner 搜索长词、整行、短语、完整句子和带标点的结构。
本事件热度走势
- 可比范围当前
- 9
- 可比范围峰值
- 1010月22日 02:00
- 近 24 小时变化
- –
趋势仅比较持续完整观测到的相同主体，范围可能小于当前热度统计。移动指针或点击图表查看每小时热度；键盘可用左右方向键切换。