LLMのトークン数と費用の見積もり

概算です。ここで使っているのはOpenAIのo200k(GPT-4o以降)のトークナイザで、ClaudeもGeminiもそれぞれ独自のものを使います。たいてい10〜20%の範囲に収まりますが、文脈長のぎりぎりを攻めるときには当てにしないでください。

LiteLLMが保守している model_prices_and_context_window.json(MIT)からです。多くの道具が参照している事実上の共有資料で、私たちが自前で持つ表よりはるかに確かです — 自分で書いた表は、その日のうちに古び始めます。取得した日付は画面に出ます。料金は契約や地域によって変わるので、大きな支出の前には提供元の価格表をご確認ください。

トークナイザは主に英語で学習されているので、英語は1文字あたり0.25トークン前後、日本語や韓国語は0.4〜0.6になります。同じ内容でも言語によって送る費用が倍近く違うことがあります。1文字あたりのトークン数も出しているので、ご自身の文章での比率が見られます。

送られません。すべてブラウザの中で動き、送信も保存もしません。だからこそ、ふつうならウェブページに貼り付けない社内の設定ファイルや本番のクエリにも使えます。通信を切ったままでも動きます。