Поиск
- wikiTypical sampling
# Typical sampling ## Определение Метод декодирования, выбирающий токены с вероятностью, близкой к средней энтропии распределения. Альтернатива top-p и temperature. ## Где…
- wikiframe sampling
# frame sampling ## Определение Техника выбора репрезентативных кадров из видеопотока для уменьшения вычислительной нагрузки. Включает стратегии: равномерная выборка, детекция смены сцен…
- wikiMargin Sampling
# Margin Sampling ## Определение Стратегия uncertainty sampling в active learning, где выбираются образцы с наименьшей разницей между двумя самыми вероятными классами…
- wikisampling probability
# sampling probability ## Определение Функция, определяющая вероятность выбора данных в зависимости от сложности и шага обучения для curriculum learning. ## Где встречается…
- wikiRandom seed sampling
# Random seed sampling ## Определение Метод оценки агентов путём запуска множества траекторий с разными случайными seed'ами и усреднения результатов для…
- wikiTail-based sampling
# Tail-based sampling ## Определение Стратегия сохранения только медленных или ошибочных трасс после завершения трейса; позволяет сохранять все ошибки, но требует…
- wikiHead-based sampling
# Head-based sampling ## Определение Стратегия семплирования трассировок, при которой решение о записи трейса принимается в начале запроса; просто, но может…
- wikiTop-k sampling
# Top-k sampling ## Определение Метод декодирования, ограничивающий выбор следующими k наиболее вероятными токенами, уменьшая хвост распределения. ## Где встречается - [[87. Как…
- wikinegative sampling
# negative sampling ## Определение Стратегия генерации отрицательных примеров (hard negatives) для обучения моделей retrieval, улучшающая разделение релевантных и нерелевантных документов. ## Где…
- wikiTop-p (nucleus) sampling
# Top-p (nucleus) sampling ## Определение Метод декодирования, выбирающий минимальный набор токенов с суммарной вероятностью ≥ p для контроля разнообразия генерации. ## Где…
- wikisampling
…Как работает greedy decoding vs beam search vs sampling|678. Как работает greedy decoding vs beam search vs sampling]] - [[679…
- wikiclass-balanced sampling
# class-balanced sampling ## Определение Class-balanced sampling — стратегия выбора примеров из датасета, при которой каждый класс представлен равномерно в каждом…
- wikiuncertainty sampling
# uncertainty sampling ## Определение Стратегия active learning, при которой выбираются примеры, в которых модель наименее уверена, для последующей разметки или генерации…
- wikidiversity sampling
# diversity sampling ## Определение Стратегия отбора обучающих примеров, учитывающая их разнообразие для предотвращения дисбаланса и улучшения обобщающей способности модели. ## Где встречается…
- wikiThompson sampling
# Thompson sampling ## Определение Байесовский метод multi-armed bandit, выбирающий действие пропорционально вероятности быть оптимальным; используется для баланса exploration/exploitation. ## Где…
- wikiMultiple sampling
# Multiple sampling ## Определение Генерация нескольких ответов LLM с разными параметрами (seed, temperature) для оценки неопределённости или согласия между вариантами. ## Где…
- wikiAdaptive sampling
# Adaptive sampling ## Определение Метод выбора частоты сэмплирования данных, например видео, на основе детектора движения: при высокой активности частота увеличивается, при…
- wikiLength-based sampling
# Length-based sampling ## Определение Метод формирования обучающей выборки, при котором длины примеров распределены равномерно с дополнительным весом для коротких последовательностей…
- wikirepetition penalty
…Как работает temperature sampling и как он влияет на качество при разных значениях|292. Как работает temperature sampling и как…
- wikirejection sampling
# rejection sampling ## Определение Метод выборки в спекулятивном декодировании: draft-модель генерирует токены, а target-модель принимает или отвергает их на…
- wikiimportance sampling
# importance sampling ## Определение Техника выборки по важности, используемая в алгоритмах RL (например, PPO) для оценки ожиданий с использованием данных, собранных…
- answerЧто такое Top-p (nucleus) sampling и как он сочетается с temperature?
…Определение Top-p (nucleus) sampling [[Вики/Top-p (nucleus) sampling\|Top-p sampling]] (также называемый [[Вики/Top-p (nucleus) sampling…
- wikiEvent-driven sampling
# Event-driven sampling ## Определение Подход, при котором кадры или данные захватываются только при наступлении определённого события (например, движение в кадре…
- wikistratified sampling
# stratified sampling ## Определение Метод разделения данных, сохраняющий пропорции категорий (классов, тематик) в каждом подмножестве для обеспечения репрезентативности при оценке. ## Где…
- wikigreedy traversal
…Как работает temperature sampling и как он влияет на качество при разных значениях|292. Как работает temperature sampling и как…
- answerКак работает greedy decoding vs beam search vs sampling?
…Как работает greedy decoding vs beam search vs sampling? ## Краткий тезис **Greedy decoding**, beam search и sampling — это три базовые…
- wikiMirostat
…Что такое Top-p (nucleus) sampling и как он сочетается с temperature|293. Что такое Top-p (nucleus) sampling и…
- wikicontrastive search
…Как работает temperature sampling и как он влияет на качество при разных значениях|292. Как работает temperature sampling и как…
- wikido_sample
…Как работает temperature sampling и как он влияет на качество при разных значениях|292. Как работает temperature sampling и как…
- wikiLength normalization
…Как работает greedy decoding vs beam search vs sampling|678. Как работает greedy decoding vs beam search vs sampling]] - [[Практика…
- wikiключевые кадры
# ключевые кадры ## Определение Выбранные кадры видео, полученные методами равномерной выборки, по смене сцены или кластеризации, для дальнейшей индексации и описания…
- wikibeam search
…Как работает temperature sampling и как он влияет на качество при разных значениях|292. Как работает temperature sampling и как…
- wikiText repetition
…Что такое Top-p (nucleus) sampling и как он сочетается с temperature|293. Что такое Top-p (nucleus) sampling и…
- wikioutput_scores
…Как работает temperature sampling и как он влияет на качество при разных значениях|292. Как работает temperature sampling и как…
- wikiContrastive decoding
…Что такое Top-p (nucleus) sampling и как он сочетается с temperature|293. Что такое Top-p (nucleus) sampling и…
- wikifrequency penalty
…Что такое Top-p (nucleus) sampling и как он сочетается с temperature|293. Что такое Top-p (nucleus) sampling и…
- wikiTemperature
…Как работает temperature sampling и как он влияет на качество при разных значениях|292. Как работает temperature sampling и как…
- answerКак работает temperature sampling и как он влияет на качество при разных значениях?
…Как работает temperature sampling и как он влияет на качество при разных значениях? ## Краткий тезис [[Вики/Temperature\|Temperature sampling]] — это…
- wikisweep
…Что такое Top-p (nucleus) sampling и как он сочетается с temperature|293. Что такое Top-p (nucleus) sampling и…
- answerЧто такое active learning для сбора синтетических данных?
…Выбрать примеры, где модель неуверенна (uncertainty sampling) Применяется одна из стратегий [[Вики/uncertainty sampling\|uncertainty sampling]] (см. [[Вики/Partition\|раздел…
- wikiretrieval-based hard negative
# retrieval-based hard negative ## Определение Метод генерации сложных отрицательных примеров, при котором из top-k извлечённых документов (исключая релевантные) выбираются…
- answerКак работает speculative decoding на уровне логитов, а не токенов?
…Они представляют собой «сырые» оценки для каждого токена словаря. - **[[Вики/rejection sampling\|Rejection sampling]]** — метод коррекции выборки: если вероятность токена…
- answerЧто такое repetition penalty и как он работает?
…Основные стратегии: [[Вики/greedy traversal\|жадный поиск]] ([[Вики/greedy traversal\|greedy]]), [[Вики/sampling\|семплинг]] ([[Вики/sampling\|sampling]]) с [[Вики/Temperature…
- wikimax entropy
# max entropy ## Определение Критерий выбора промптов в активном обучении, основанный на наибольшей неопределённости суррогатной модели. ## Где встречается - [[596. Как работает…
- answerКак вы индексируете видео-контент в RAG-системе?
…Ключевые кадры (Frame Sampling) Визуальный контент требует выбора репрезентативных кадров. Подходы: - Uniform [[Вики/sampling\|sampling]] — каждый N-ый кадр (например…
- wikiMOG2
# MOG2 ## Определение Алгоритм вычитания фона, использующий смесь гауссиан для адаптивного выделения движущихся объектов на видео и оптимизации frame sampling. ## Где…
- wikiDistinct-N
…Что такое Top-p (nucleus) sampling и как он сочетается с temperature|293. Что такое Top-p (nucleus) sampling и…
- wikiFPS
…Используется при frame sampling для real-time видеоаналитики (например, 1-5 FPS). ## Где встречается - [[800+ вопросов|800+ вопросов]] - [[290. Реализовать…
- wikiStochastic speculative decoding
# Stochastic speculative decoding ## Определение Вариант спекулятивного декодирования, использующий rejection sampling для точного сохранения распределения целевой модели при ускорении генерации. ## Где…
- wikiGPT-2
…Что такое Top-p (nucleus) sampling и как он сочетается с temperature|293. Что такое Top-p (nucleus) sampling и…