Поиск

• wikiranking improvement

  # ranking improvement ## Определение Процесс улучшения порядка выдачи результатов поиска или рекомендаций со временем, часто на основе implicit feedback (например, кликов…

• wikisemantic ranking

  # semantic ranking ## Определение Вторая стадия ранжирования после ANN, использующая более мощную эмбеддинг-модель для переупорядочивания top-k результатов. ## Где встречается…

• wikimodel ranking

  # model ranking ## Определение Упорядочивание моделей по качеству на основе метрик сравнения. ## Где встречается - [[Практика|Практика]] ## Навигация - [[00. Индекс терминов|Индекс…

• wikiranking

  # ranking ## Определение Задача упорядочивания объектов по предпочтению; в контексте RLHF важна не калибровка, а относительный порядок для обучения reward model…

• wikipairwise ranking

  # pairwise ranking ## Определение Метод сравнения моделей, при котором вместо абсолютных оценок предъявляется пара ответов и выбирается лучший; снижает субъективность оценки…

• wikiFusion ranking

  # Fusion ranking ## Определение Метод объединения результатов нескольких ранжирующих систем для получения итогового ранжированного списка. ## Где встречается - [[43. Реализовать RRF (Reciprocal…

• answerЧто такое semantic ranking на основе embeddings (вторая стадия после ANN)?

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)? ## Краткий тезис [[Вики/reranking\|Semantic ranking]] на основе [[Вики…

• wikiListwise evaluation

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] ## Навигация - [[00. Индекс терминов|Индекс…

• wikipairwise ranking loss

  # pairwise ranking loss ## Определение Функция потерь для обучения reward model, основанная на разнице скоров chosen и rejected ответов и моделирующая…

• wikiCentral tendency

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] ## Навигация - [[00. Индекс терминов|Индекс…

• wikiOpen LLM Leaderboard

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] ## Навигация - [[00. Индекс терминов|Индекс…

• wikiPairwise comparison

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[Практика|Практика]] - [[800+ вопросов|800…

• wikiSelf-critique through pairwise

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] ## Навигация - [[00. Индекс терминов|Индекс…

• wikimultiple annotators

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[800+ вопросов|800+ вопросов]] ## Навигация…

• wikiK-factor

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[284. Настроить pairwise evaluation для…

• wikiElo rating

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[Практика|Практика]] - [[800+ вопросов|800…

• wikiinter-user variability

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[800+ вопросов|800+ вопросов]] ## Навигация…

• wikipointwise

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[284. Настроить pairwise evaluation для…

• wikiLambdaRank

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• answerКак делать pairwise ranking для сравнения моделей?

  …Как делать pairwise ranking для сравнения моделей? ## Краткий тезис [[Вики/pairwise ranking\|Pairwise ranking]] ([[Вики/Pairwise comparison\|попарное ранжирование]]) — это…

• wikiLMSys Chatbot Arena

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[800+ вопросов|800+ вопросов]] - [[277…

• wikiWin rate

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[800+ вопросов|800+ вопросов]] - [[223…

• wikiMS MARCO

  # MS MARCO ## Определение Датасет Microsoft MAchine Reading COmprehension, содержащий реальные пользовательские запросы и коллекцию документов. Применяется для обучения и оценки…

• wikiAlpacaEval

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[800+ вопросов|800+ вопросов]] - [[284…

• wikireranking

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikiprecision@k

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikiScaNN

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikiMT-Bench

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[800+ вопросов|800+ вопросов]] - [[71…

• wikiMultipleNegativesRankingLoss

  # MultipleNegativesRankingLoss ## Определение Контрастивная функция потерь из библиотеки sentence-transformers для обучения эмбеддингов: выбирает правильную пару среди множества негативных примеров. ## Где…

• wikiBi-encoder

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikibootstrap

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[800+ вопросов|800+ вопросов]] - [[42…

• wikiBM25

  # BM25 ## Определение Классический алгоритм ранжирования по ключевым словам, использующий вероятностную модель для оценки релевантности. Часто применяется в гибридном поиске (векторный…

• wikiBGE-reranker

  # BGE-reranker ## Определение Open-source cross-encoder модель для ранжирования (re-ranking) в RAG-системах, поддерживающая русский язык. ## Где встречается…

• wikiключевой поиск

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: RAG с cross-encoder reranking

  …Загрузить датасет MS MARCO passage ranking: ```python from datasets import load_dataset dataset = load_dataset("ms_marco", "passage_ranking", split…

• wikiгибридный поиск

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikicaching

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• answerКак вы делаете load shedding при перегрузке LLM сервера?

  …Как определить «наименее важный»: - По типу операции — например, [[Вики/reranking\|re-ranking]] второстепенных кандидатов можно пропустить, а ответ пользователю — нет…

• wikilearning-to-rank

  # learning-to-rank ## Определение Класс методов машинного обучения для упорядочивания документов по релевантности запросу; применяется в retrieval для LLM, например…

• wikiNDCG

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikiHNSW

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikihybrid approach

  # hybrid approach ## Определение Комбинация различных техник (например, fine-tuning и RAG) для баланса скорости, точности и адаптивности в production-системах…

• answerКак вы оцениваете retrieval с учетом позиции (Position-aware metrics)?

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)\|380]] | Как вы оцениваете качество re‑ranking в RAG…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Реализовать RRF (Reciprocal Rank Fusion)

  …Сохраняем в файл `data/synthetic_rankings.[[Вики/JSON\|json]]` (или [[Вики/Pickle\|pickle]]). --- ## 3. Технологический стек | Компонент | Инструменты | Назначение | |-----------|-------------|------------| | Язык…

• wikibias

  …Как делать pairwise ranking для сравнения моделей|871. Как делать pairwise ranking для сравнения моделей]] - [[875. Как делать synthetic eval…

• wikiHit rate

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikiMRR

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• wikisentence-transformers

  …Что такое semantic ranking на основе embeddings (вторая стадия после ANN)|380. Что такое semantic ranking на основе embeddings (вторая…

• answerКак вы делаете RAG для изображений (image retrieval without text)?

  …Ранжирование и пост-обработка После получения top-k кандидатов можно применить дополнительные этапы: - [[Вики/reranking\|Re-ranking]] использовать более тяжёлую…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: RAG с мультимодальными документами

  …лучшие практики | | 312 | Ранжирование (re-ranking) в retrieval | | 401 | LLM с vision (GPT-4o, CLIP captioning) | | 555 | Prompt engineering для…