Что означает «Токен»?

Токен

Небольшой фрагмент текста, который языковая модель читает и пишет, часто часть слова. Цены и лимиты обычно считают в токенах.

Все термины ИИ

• Искусственный интеллект
• Большая языковая модель
• Чат-бот
• Генеративный ИИ
• Промпт
• Контекстное окно
• Галлюцинация
• ИИ-агент
• Обучение
• Дообучение
• Параметры
• Открытая модель
• Бенчмарк
• Рассуждающая модель
• Мультимодальность
• RAG
• Инференс
• GPU
• API
• Дипфейк
• Согласование
• AGI
• Квантование
• Смесь экспертов
• Диффузионная модель
• Дата-центр