トークンとは
AIは文章を「トークン」という小さな単位に分けて処理します。 英語ではだいたい4文字で1トークン、日本語は文字あたりのトークンが多く、 1文字で1トークン前後になりがちです。入力できる量(コンテキスト)はこのトークン数で決まります。
なぜ概算か
正確なトークン数は、AIごとの分割ルール(トークナイザー)で変わります。 このツールは、日本語と英字を分けて係数をかけた近似値を出します。 「およそ何トークンか」を素早くつかむ用途に向いています。
入力は送信されません
カウントはすべてブラウザ内で行われ、貼り付けた文章がサーバーやAIに送信されることはありません。
このツールについて
概算値です。厳密な上限管理は各AIの公式ツールでご確認ください。