Claude トークナイザー

LLM トークナイザー

Anthropic の Claude モデルでテキストが使う正確なトークン数を数えます。Anthropic公式の count_tokens API を使うため、Claude API が実際に数える数と一致します。

Claude トークナイザー

Claude トークナイザーは、 Anthropic の Claude モデルでテキストが使う正確なトークン数を、 Anthropic 公式のトークンカウント API で数えるツールです。テキストを貼り付けてモデルを選ぶだけで、概算ではなく正確な数が得られます。

Claude に GPT / tiktoken のトークナイザーを使えないのはなぜ?

Claude は OpenAI のトークナイザーを使っていないため、tiktoken で数えると数が合いません。古い「 Claude トークナイザー」サイトは旧 Claude 1/2のトークナイザーを使っており、現行の Claude 3・4系には不正確です。現行モデルで正確なのは Anthropic 公式 API が返す数だけで、本ツールはまさにそれを返します。

Claude のトークン数を数える手順

  1. テキストを貼り付け・入力します。
  2. 対象の Claude モデル( Opus ・ Sonnet ・ Haiku )を選びます。
  3. トークン数を数える を押すと、そのモデルでの正確な数が表示されます。

Claude のモデルとトークナイザー世代

モデルトークナイザー
Claude Opus 4.8・ Sonnet 4.5・ Haiku 4.5現行( Opus 4.7以降)
Claude Opus 4.6旧(4.7より前)

Anthropic は Claude Opus 4.7からトークナイザーを変更したため、同じテキストでも Opus 4.6と Opus 4.8で数が少し変わることがあります。実際に呼び出すモデルで数えてください。

The quick brown fox jumps over the lazy dog. は Claude Opus 4.8 でおよそ 12トークン です。日本語や長文は1文字あたりのトークンが多くなりがちです。ライブ表示の「文字/トークン」で自分のテキストの目安を確認できます。

制限事項

  • 無料のログインが必要です。トークンを数えるのにクレジットはかかりません。
  • トークンごとの色分け内訳は表示されません。 Anthropic のトークナイザーは非公開のため、正確な数のみを返します。トークンの可視化が必要な場合は( OpenAI のトークナイザーは公開されているため) ChatGPT トークナイザーをご利用ください。
  • トークン数はモデルごとに異なります。モデルを切り替えると数の違いを確認できます。

運営者情報

Unbounded Pioneering株式会社
ターニントAI

ターニントAIツールは、AIエージェントプラットフォーム「Turnint AI」を提供する Unbounded Pioneering株式会社が開発・運営する無料ツール群です。

鈴木 凌介
鈴木 凌介創業者・代表取締役

AIエージェントプラットフォーム「Turnint AI」を提供する Unbounded Pioneering株式会社の創業者・代表取締役。機械学習・AIプロダクト開発のエキスパート。大学在学中は研究室にて機械学習の研究に従事。その後、株式会社プレイド・楽天・リクルートにおいて、ソフトウェアエンジニアとして大規模プロダクトの設計・開発を手がけるとともに、新規事業開発を推進。現在は生成AI・AIエージェント領域を専門とし、エンジニアリングと事業開発の両面から一貫してプロダクト開発に携わる。ウェブ技術領域における複数の特許を発明。

特許発明者(特許第6887648号・特許第7480958号)・Turnint AI関連技術で特許出願中

お問い合わせはこちら

お世話になっております

当社へご興味をもっていただき、ありがとうございます。1営業日以内に、担当者よりご連絡を差し上げます。

こんなご相談にお答えしています

  • ターニントAIの導入・活用の相談
  • ターニントAIのデモ・トライアル
  • AI活用全般のご相談(自社プロダクト以外も歓迎)
  • アライアンス・パートナーシップ
  • その他のご質問

オンラインで相談する

カレンダーから直接ミーティングを予約することも可能です。

テンプレートを選ぶか、自由にご記入ください。