---
title: "トークンとは｜AI-Ready.jp"
url: https://www.ai-ready.jp/glossary/token/
description: "トークンとは、言語モデルが文章を処理するときの、語や文字の断片の単位のことです。トークンは、言語モデルが文章を扱うときに区切る単位です。単語や文字、その一部などに分けられ、日本語では1文字が1トークン"
publisher: "フロレンティナ株式会社"
---
[生成AI・LLM](https://www.ai-ready.jp/glossary/#genai)

# トークン

とーくん／ Token

定義

トークンとは、言語モデルが文章を処理するときの、語や文字の断片の単位のことです。

トークンは、言語モデルが文章を扱うときに区切る単位です。単語や文字、その一部などに分けられ、日本語では1文字が1トークン前後になることもあれば、複数の文字がまとまって1トークンになることもあります。数え方はモデルによって異なります。多くのAIサービスでは、入力と出力のトークン数に応じて利用料金が決まり、一度に扱える文章の長さ（コンテキストウィンドウ）もトークン数で示されます。業務で使う量を見積もるときは、扱う文書の長さと回数からおおよそのトークン数を考えておくと、費用の見通しを立てやすくなります。

## 関連する用語

- [コンテキストウィンドウ](https://www.ai-ready.jp/glossary/context-window/)
- [大規模言語モデル（LLM）](https://www.ai-ready.jp/glossary/llm/)
- [プロンプト](https://www.ai-ready.jp/glossary/prompt/)

## この用語が出てくる記事

- [国内のLLM開発はいまどうなっているか？ 2026年秋の動きと企業の選び方](https://www.ai-ready.jp/column/japanese-llm/)コラム

最終更新 2026-10-25

## 次の一歩

[測るAI-Ready診断（無料）いまの準備状況を、7つの柱で確かめられます。](https://www.ai-ready.jp/diagnosis/) [相談する結果の解説（30分・無料）診断の結果をもとに、オンラインでご説明します。](https://www.ai-ready.jp/consult/review/) [窓口ご相談のお申し込み経営・M&A・バリューアップはフロレンティナ、AIの導入・開発・データ・セキュリティはアメリア・テクノロジーがお受けします。](https://www.ai-ready.jp/consult/apply/)

---

出典：フロレンティナ株式会社「トークンとは｜AI-Ready.jp」 https://www.ai-ready.jp/glossary/token/
