メインコンテンツへ移動

AIトークンをカウント

選択したトークナイザーで文章のトークン数を数えます。モデルに渡す文章が、コンテキストのどの程度を使うか見積もる際に利用できます。

端末内で処理

分析するテキスト

モデルの実際のバイトペアエンコーディングでローカルにトークン化されます — テキストがこのブラウザから外部に送信されることはありません。

モデルと見積もり

コスト見積もりにのみ使用します — 応答の長さを見積もってください。

カウント

0
トークン
0
文字数
0
単語
—
文字 / トークン
コンテキストウィンドウ — GPT-4o128,000トークン中0
コスト見積もり$0.0050
入力
$0.00
出力
$0.0050

100万トークンあたりの定価です。プロバイダーは価格を変更するため、すべての数値は見積もりとして扱ってください。

トークンの可視化

モデルがテキストをトークンに分割する様子を見るには、上にテキストを入力または貼り付けてください。

AIトークンをカウントはどう動きますか?

使い方

文章を貼り付け、利用するモデルに合うエンコーディングを選びます。トークンは単語とは限らず、単語の一部、記号、空白などを表します。同じ文章でも、方式が違えば数は変わります。

確認しておきたい点

入力欄の文章だけを数えても、リクエスト全体の使用量にはなりません。システム指示、会話履歴、ツール定義、生成される回答の分も考慮してください。課金や上限の計算方法は、利用先の仕様で確認が必要です。

入力

You are a helpful assistant. Summarize the meeting notes.

出力

12 tokens · 48 characters · ~9 words (GPT-4o, o200k_base)

AIトークンをカウントが対応するオプションとエッジケースは?

技術リファレンスとオプション
パラメータ型デフォルト動作とエッジケース
文章——実際に送信する内容を入力します。
エンコーディング——対象モデルに対応する方式を選びます。
コンテキスト——指示、履歴、回答を含めた余裕を確保します。

よくある質問

表示された数がそのまま請求額の計算に使われますか?

必ずしも一致しません。メッセージの構造やツール定義など、入力欄以外の情報にもトークンが使われる場合があります。