единый токенизатор

Определение

Токенизатор, объединяющий текстовые и визуальные токены в один словарь, что позволяет мультимодальным моделям обрабатывать текст и изображения как единую последовательность.

Где встречается

• 365. Как работает мультимодальное выравнивание (alignment) в моделях типа Chameleon (Meta)
• 545. Как работает мультимодальное выравнивание (alignment) в моделях типа Chameleon (Meta)

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление