非英语语言使用AI模型成本更高：Tokenizer偏差带来隐性"税"

据 Rest of World 报道（2026年10月26日），研究发现由于 AI 模型的 Tokenizer 对非英语语言效率较低，使用非英语语言调用AI模型的成本显著高于英语。这种隐性"Tokenizer税"加剧了全球AI使用的不平等。