2026 年 10 月 31 日 · 星期六DeepSeek Harness 中文社区动态第 74 期
dsh-ai.com 每日简报DEEPSEEK HARNESS OBSERVER
DeepSeek Harness · 社区讨论

tokenMeter under-prices CJK text by ~2.3x: the chars/4 heuristic is script-blind

#10153 · SparkElf · 2026-10-18

📝 摘要

tokenMeter 的 chars/4 估算对 CJK 文本少算约 2.3 倍。

📄 正文节选

Summary `tokenMeter`'s fixed `CHARS_PER_TOKEN = 4` heuristic systematically under-prices CJK content. Measured against a live OpenAI-compatible route (`deepseek-v4.1-flash`), the same request over-counts English text by ~1.4x and under-counts Chinese text by ~2.3x. On a real agent session whose surf……

节选自讨论正文开头,完整内容见原文

🔗 阅读原文

GitHub 讨论 #10153 ↗

💬 更多热门讨论

← 返回热门讨论 · 查看问题库