中文翻译暂不可用，显示俄语原文。
Shared Tokenizer
Shared Tokenizer
Определение
Компонент, обрабатывающий как текст, так и изображения через единый словарь токенов, включая специальные SENTINEL токены.
中文翻译暂不可用，显示俄语原文。
Компонент, обрабатывающий как текст, так и изображения через единый словарь токенов, включая специальные SENTINEL токены.