max_length
max_length
Определение
Параметр токенизации или модели, задающий максимальное количество токенов в последовательности (например, 512–2048). Используется для ограничения длины входных данных.
Где встречается
- 32. Как вы подготовите датасет для fine-tuning, если у вас только неструктурированные диалоги с клиентами
- 54. Сравнить Hyena vs FlashAttention на 128k