中文翻译暂不可用,显示俄语原文。

единый токенизатор

единый токенизатор

Определение

Токенизатор, объединяющий текстовые и визуальные токены в один словарь, что позволяет мультимодальным моделям обрабатывать текст и изображения как единую последовательность.

Где встречается

Навигация