启鑫的黑板报
探索与分享
首页
未分类
编码
安全相关
AI
coding
about
标签:
自然语言处理
中文与英文在AI对话中的Token消耗与输出质量差异分析
3 月 25, 2025
—
AI
由于中文缺乏明显的单词边界,Tokenization机制较为复杂,导致中文在AI处理时通常消耗更多的Token…