stop_token
stop_token
Определение
Специальный токен, обозначающий конец последовательности (end-of-sequence), используемый для завершения генерации текста моделью.
Специальный токен, обозначающий конец последовательности (end-of-sequence), используемый для завершения генерации текста моделью.