единый токенизатор
единый токенизатор
Определение
Токенизатор, объединяющий текстовые и визуальные токены в один словарь, что позволяет мультимодальным моделям обрабатывать текст и изображения как единую последовательность.
Где встречается
- 365. Как работает мультимодальное выравнивание (alignment) в моделях типа Chameleon (Meta)
- 545. Как работает мультимодальное выравнивание (alignment) в моделях типа Chameleon (Meta)