生成AIの基礎
トークンとは?文字数制限と料金の関係をわかりやすく解説
AIにおけるトークンとは、テキストを処理する最小単位です。日本語1文字は約1〜2トークン相当。コンテキスト上限・API料金の計算基準になるため、業務で生成AIを使うなら必ず押さえておきたい概念です。
2件の記事
AIにおけるトークンとは、テキストを処理する最小単位です。日本語1文字は約1〜2トークン相当。コンテキスト上限・API料金の計算基準になるため、業務で生成AIを使うなら必ず押さえておきたい概念です。
コンテキストウィンドウとは、AIが一度に参照できるテキストの上限です。サイズはトークン数で表され、上限を超えると情報が失われます。業務で長い資料や会話を扱うための実践的な対処法を解説します。