векторная дедупликация
векторная дедупликация
Определение
Процесс удаления семантически похожих документов на основе кластеризации их векторных представлений (эмбеддингов), позволяющий избежать дублирования информации в корпусе для RAG.
Процесс удаления семантически похожих документов на основе кластеризации их векторных представлений (эмбеддингов), позволяющий избежать дублирования информации в корпусе для RAG.