トークンとは？

トークン

言語モデルが読み書きする小さな文字のまとまりで、単語の一部であることも多い。料金や上限はたいていトークン数で数えます。

AI用語の一覧

• 人工知能
• 大規模言語モデル
• チャットボット
• 生成AI
• プロンプト
• コンテキストウィンドウ
• ハルシネーション
• AIエージェント
• 学習
• ファインチューニング
• パラメーター
• オープンモデル
• ベンチマーク
• 推論モデル
• マルチモーダル
• RAG
• 推論処理
• GPU
• API
• ディープフェイク
• アライメント
• AGI
• 量子化
• 混合エキスパート
• 拡散モデル
• データセンター