LLM トークンカウンター

モデルはテキストをトークン単位で読み、トークン単位で課金します。トークンは単語全体、単語の一部、1 文字、またはバイトです。トークナイザーは各社が独自に学習しているため、同じテキストでもモデルによってトークン数が変わり、英語以外のテキストは多くのトークンを使うのが普通です。

オープンウェイトのモデルには、各社が Hugging Face で公開したトークナイザーファイル（特定のバージョンに固定）を使います。ブラウザが一度だけダウンロードして保存し、バックグラウンドのワーカーで数えるので、同じテキストをそのモデル自身のトークナイザーにかけたときと同じ数になります。

トークナイザーが公開されていない場合や、ファイルの読み込み前は、UTF-8 のバイト数 ÷ 4（切り上げ）で推定します。英語ならおよそ 4 文字で 1 トークン、日本語や中国語なら 1 文字（3 バイト）で約 0.75 トークンです。目安としてお使いください。

数えるのは貼り付けたテキストだけです。実際のリクエストにはロール記号などのチャット形式や、ツール定義・画像も含まれるため、請求される入力トークンは少し多くなります。課金された数は各 API レスポンスの usage フィールドで確認できます。

料金は、このテキストを入力として送ったときの金額で、cheapaimodel で支払う価格で計算しています。取り消し線の金額は、同じテキストを定価で送った場合です。

料金 = トークン数 ÷ 1,000,000 × 100 万トークンあたりの入力価格

計算はお使いの端末の中で行われます。ネットワーク通信はトークナイザーファイルの取得だけで、テキストは含まれません。