トークンとは、生成 AI(大規模言語モデル)が文章を読み書きするときに使う最小の区切りで、利用量と料金を数える単位のことです。1文字や単語の一部が1トークンになり、API の料金は入力と出力のトークン数に単価を掛けて決まります。
トークンは文字数とも単語数とも一致しない区切り
トークンの数は文字数や単語数から一律には決まらず、モデルごとの分け方(トークナイザー)で変わります。Google は Gemini について、1トークンはおよそ4文字、100トークンは英語でおよそ60〜80語に相当すると説明しています(Google「Understand and count tokens」Gemini API ドキュメント・2026年11月3日確認)。
この目安は英語を前提にした値です。同じ会社のモデルでも、世代が変わると数え方が変わることがあり、Anthropic は Claude 4.7 以降のモデルが新しいトークナイザーを使い、同じ文章でおよそ30%多くトークンを数えると公表しています(Anthropic「Pricing」Claude API ドキュメント・2026年11月3日確認)。単価が据え置きでも、モデルを切り替えただけで請求額が動きうるということです。
そのため、見積もりは換算の目安ではなく実測で出すのが確実です。Claude の API は、応答のたびにそのリクエストで消費したトークン数を usage の欄で返し、送る前に数を見積もる機能も用意しています(Anthropic「Context windows」Claude API ドキュメント・2026年11月3日確認)。
自社の実際の文書と質問を数本流して数えることが、費用の見積もりの出発点になります。
日本語は英語よりトークンが多くなりやすい
同じ内容でも、日本語の文章は英語より多くのトークンに分かれやすい傾向にあります。同じ2,000文を200言語に訳した対訳データ(FLORES-200)で比べた研究では、2023年当時の ChatGPT・GPT-4 のトークナイザーで、日本語は英語の2.30倍のトークンを要しました(Petrov ほか「Language Model Tokenizers Introduce Unfairness Between Languages」NeurIPS 2023)。
同じ研究では、英語に最も近かったポルトガル語でも1.48倍と、英語以外の言語は総じて多めに数えられる結果でした。日本語については、このトークナイザーでも漢字の65%超が1文字に3トークンを要すると報告されています。
この比率は測定した時点のトークナイザーのもので、今のモデルにそのまま当てはまるわけではありません。読み取るべきは、英語圏の資料にある「1トークン=約4文字」の換算を日本語の業務文書に流用すると、量を少なく見積もりやすいという点です。
契約書・社内規程・議事録のような日本語の長文を AI に読ませる業務ほど、換算と実測の差は開きます。
料金は入力と出力で単価が違い、文脈の量でも増える
API の料金は、入力のトークン数と出力のトークン数にそれぞれの単価を掛けた合計で決まります。Anthropic の Claude Sonnet 5.5 は入力が100万トークンあたり2ドル、出力が10ドルで、出力の単価は入力の5倍です(Anthropic「Pricing」Claude API ドキュメント・2026年11月3日確認)。
もう1つの要因が文脈(過去のやり取りや参照資料)の量です。各ターンの入力には過去の会話の全履歴と今回の質問が入り、システムプロンプト(AI への事前の指示)・添付した文書・ツールの定義もすべて数えられます。AI が考える過程の出力(thinking)は出力として課金され、過去の思考を保持するモデルでは、次のターン以降に入力としても課金されます(Anthropic「Context windows」Claude API ドキュメント・2026年11月3日確認)。
Anthropic の料金表によれば、Web 検索で取得した結果も、その後の会話のターンで入力トークンとして数える扱いです。10往復目の質問には9往復分の履歴が乗るので、同じ長さの質問でも後になるほど1回の費用が上がっていきます。
| 費用が増える要因 | 何が起きるか | 抑える手 |
|---|---|---|
| 言語 | 日本語は英語より、同じ内容で多くのトークンに分かれやすい | 自社の文書で実測し、英語の換算を使わない |
| 入力と出力 | 出力の単価が入力より高い(Claude Sonnet 5.5 で5倍) | 出力の長さに上限を設け、要らない説明を書かせない |
| 文脈 | 過去のやり取り・参照資料・指示文が毎回の入力に積み上がる | 履歴を区切る、参照資料を絞る、キャッシュを使う |
文脈の費用を下げる仕組みは各社が用意しています。同じ料金表では、繰り返し送る同じ前置き部分をキャッシュから読むと Claude Sonnet 5.5 で入力単価の0.05倍になり、急がない処理をまとめて送るバッチ処理は入力・出力とも50%の割引です。
業務で使う量は「1回の入力と出力×回数」で見積もる
月の費用は、1回あたりの入力と出力のトークン数にそれぞれの単価を掛け、月の回数を掛けて出します。
月の費用 =(1回の入力トークン数 × 入力単価 + 1回の出力トークン数 × 出力単価)× 1日の回数 × 月の稼働日数
1回の入力トークン数 = 指示文 + 参照資料 + 過去のやり取り + 今回の質問
Claude Sonnet 5.5 の単価(入力100万トークンあたり2ドル・出力10ドル)で、1回の入力を2万トークン、出力を2,000トークンと置くと、1回は入力0.04ドルと出力0.02ドルで計0.06ドルになります(Anthropic「Pricing」Claude API ドキュメント・2026年11月3日確認)。1日500回・月20日なら月1万回で、600ドルという計算です。量の値は式の使い方を示すために置いたもので、実際の業務では実測した値を入れてください。
この例では、出力の単価が5倍でも、金額の3分の2は入力が占めています。入力の大半が参照資料と履歴であれば、そこを絞るほうが、出力を短くするより費用は大きく下がります。
稟議に出せる根拠を作るには、次の順で進めるのが近道です。
- 対象の業務を3つほど選び、実際の文書と質問で1回分を AI に処理させ、
usageの入力・出力のトークン数を記録する - AI エージェントのように1つの依頼の中で何度もモデルを呼ぶ仕組みは、1依頼あたりの呼び出し回数も数える。ツールの実行結果が次の呼び出しの入力に加わるので、回を追うごとに入力が増える
- 利用者数と1人あたりの1日の回数から月の回数を置き、上の式に入れる
- 本番に入れた後は、毎月の実績と見積もりを比べ、ずれた要因(履歴の長さ・参照資料の量・呼び出し回数)を直す
AI エージェントの呼び出しの組み立て方は、AI エージェント開発の進め方で詳しく扱っています。工程ごとの費用の内訳はAI 開発の費用も参考になるはずです。
企業が導入するときに決めること
全社で生成 AI を使い始める前に、トークンの費用について決めておくことは4つです。
1つ目は予算の持ち主と月の上限です。部門ごとに持つのか、AI 推進室がまとめて持つのかを決め、上限に近づいたときに誰へ知らせるかまで決めておくと、月末に請求額を見て驚く事態を避けられます。
2つ目は業務ごとのモデルの使い分けです。Claude の料金表では、Haiku 5.5(入力10万トークン以下)が入力0.10ドル・出力0.50ドル、Opus 5.5 が入力4ドル・出力20ドルで、単価に40倍の開きがあります(Anthropic「Pricing」Claude API ドキュメント・2026年11月3日確認)。定型の分類や短い要約は小さいモデルに、判断を伴う文書作成は大きいモデルに、と業務ごとに振り分けるだけで費用の水準は変わります。
3つ目は文脈の持たせ方です。社内チャットの履歴をどこで区切るか、参照資料を何件まで渡すかは、費用だけでなく精度にも関わります。Anthropic は、トークン数が増えるほど正確さと想起が落ちる現象(context rot)があり、文脈に何を入れるかの選別が容量と同じくらい大切だと説明しています(Anthropic「Context windows」Claude API ドキュメント・2026年11月3日確認)。社内ナレッジに答える仕組みの設計は、社内 AI チャットボットの記事を参照してください。
4つ目は費用と成果の対応づけです。トークンの費用は単独で見ると高いか安いか判断できないので、置き換えた作業時間や処理件数と並べて測ります。測り方の詳細はAI の ROI の測り方の記事が参考になるはずです。
PoC の段階でこの4つを決め、業務ごとのトークン量を実測しておけば、本番の運用費を稟議にかけるときの根拠になる、というのが進め方の要点です。
Offers AX は、数週間で動くプロトタイプを作り、実業務で効果を確かめてから本実装へ進める AI エージェント開発と、効果測定の設計を含むコンサルティングを提供しています。構築先はお客様の GCP・Azure・AWS の環境で、引き継ぎの資料と社内の運用体制の設計まで支援し、契約が終わっても資産はお客様の環境に残ります。
Offers AX のサービス内容を見る。業務ごとの利用量の見積もりから相談したい場合は、無料相談を申し込むからお問い合わせください。
トークンと似た語との違い
トークンは量を数える単位で、似た語の多くは「その単位で測った上限」か「トークンとは別の課金」を指します(Anthropic「Context windows」「Pricing」Claude API ドキュメント・2026年11月3日確認)。
| 語 | 何を表すか | トークンとの関係 |
|---|---|---|
| コンテキストウィンドウ | モデルが1回の応答で参照できる文章全体。応答そのものも含む | 上限をトークン数で表す。Claude Sonnet 5.5 などは100万トークン |
| レート制限 | 一定時間に使えるトークン数やリクエスト数の上限 | 料金とは別に処理量を縛る。思考の出力(thinking)も数えられる |
| トークン以外の課金 | ツールの利用ごとにかかる料金 | Claude API の Web 検索は1,000回あたり10ドルで、取得した結果のトークン費用が別にかかる |
コンテキストウィンドウが大きいモデルでも、長い入力は毎回その分だけ課金されます。器が大きいことと、たくさん入れてよいことは別の話です。
なお、Web サービスのログインに使う認証トークンや、暗号資産のトークンは、同じ語でも別のものを指します。生成 AI の文脈で料金や上限の話に出てくるのは、本ページで扱う文章の区切りとしてのトークンです。
関連する用語
- AI エージェント: 1つの依頼の中でモデルを何度も呼び、ツールの結果を次の入力に加えるので、対話よりトークンの消費が増えやすい
- マルチエージェント: 複数のエージェントがやり取りする分、呼び出しと文脈が積み上がる
- AI オーケストレーション: どの処理にどのモデルを使うかの振り分けは、費用の設計とも重なる
- AI ガバナンス: 利用量と費用の上限を社内ルールに入れておく
- シャドー AI: 会社が把握していない利用は、トークンの費用も見えない
AI エージェントに関する記事はAI エージェントのカテゴリにまとめています。