Show HN: 再現可能なベンチマーク – OpenAIは非英語に対して1.5倍から3.3倍多く課金している
OpenAIのAPI料金を分析した再現可能なベンチマークによると、非英語テキストの処理には英語の1.5倍から3.3倍のトークンが消費され、結果的に同等の内容でも大幅に高い料金が発生することが明らかになりました。この差は言語間のトークン化効率の違いに起因しています。
OpenAIのAPI料金を分析した再現可能なベンチマークによると、非英語テキストの処理には英語の1.5倍から3.3倍のトークンが消費され、結果的に同等の内容でも大幅に高い料金が発生することが明らかになりました。この差は言語間のトークン化効率の違いに起因しています。