トークン読み: とーくん

Q: トークンとは何ですか？

AI が扱う文字のかたまり。 日本語は 1 文字 ≒ 1 トークン、 英語は単語 ≒ 1 トークン。 料金計算の単位でもある。トークンとは AI が処理する最小単位の「文字のかたまり」。 LLM は文章を直接処理するのではなく、 トークンに分割してから扱う。 英語では 単語 ≒ 1 トークン、 日本語では 1 文字 ≒ 1-2 トークン換算が目安。 API 料金は ほぼ全て「百万トークンあたり $X」 の従量制で、 GPT-5 が 入力 $5 / 出力 $20、 Claude Opus が 入力 $15 / 出力 $75 程度 (2026年5月時点)。

Q: トークンの使い方や活用例を教えてください

トークンとは AI が処理する最小単位の「文字のかたまり」。 LLM は文章を直接処理するのではなく、 トークンに分割してから扱う。 英語では 単語 ≒ 1 トークン、 日本語では 1 文字 ≒ 1-2 トークン換算が目安。 API 料金は ほぼ全て「百万トークンあたり $X」 の従量制で、 GPT-5 が 入力 $5 / 出力 $20、 Claude Opus が 入力 $15 / 出力 $75 程度 (2026年5月時点)。 月の API 料金を抑えるには 不要な前置きを省く / 出力を簡潔に指示する / 古いコンテキストを定期的にクリアする、 等の工夫が効く。

2026-06-05 更新

AI用語辞典LLM / 言語モデル最終更新: 2026-06-05・AI PICKS編集部

定義

AI が扱う文字のかたまり。日本語は 1 文字 ≒ 1 トークン、英語は単語 ≒ 1 トークン。料金計算の単位でもある。

トークンとは — 詳しく解説

トークンとは AI が処理する最小単位の「文字のかたまり」。 LLM は文章を直接処理するのではなく、トークンに分割してから扱う。英語では単語 ≒ 1 トークン、日本語では 1 文字 ≒ 1-2 トークン換算が目安。 API 料金はほぼ全て「百万トークンあたり $X」の従量制で、 GPT-5 が入力 $5 / 出力 $20、 Claude Opus が入力 $15 / 出力 $75 程度 (2026年5月時点)。月の API 料金を抑えるには不要な前置きを省く / 出力を簡潔に指示する / 古いコンテキストを定期的にクリアする、等の工夫が効く。 AI PICKS の運用では Prompt Caching を併用して月 30-50% の API コスト削減を実現している。