Поиск

• wikiConceptNet

  # ConceptNet ## Определение Семантическая сеть, используемая для расширения запросов (query expansion) в RAG, альтернатива WordNet. ## Где встречается - [[374. Как вы делаете…

• wikiConcept direction

  # Concept direction ## Определение Вектор в скрытом пространстве модели, кодирующий абстрактную концепцию (например, честность или пол). Применяется в representation engineering для…

• wikiConcept shift

  # Concept shift ## Определение Изменение связи между запросами и релевантными документами, когда значение термина смещается (например, "лучший телефон" начинает означать другую…

• wikiPOC

  # POC ## Определение Прототип или минимальная реализация для проверки гипотезы и демонстрации технической выполнимости решения перед полноценной разработкой. ## Где встречается - [[800…

• wikidata drift

  # data drift ## Определение Изменение распределения входных данных со временем, требующее мониторинга и периодического переобучения модели. ## Где встречается - [[34. Какая у…

• wikidrift detection

  # drift detection ## Определение Методы выявления дрейфа данных или модели, например, сравнение распределений метрик (KS-тест, PSI) или падение точности. Используется…

• answerКак вы отслеживаете data drift для распределения запросов к RAG?

  …Отслеживание [[Вики/Covariate shift\|covariate shift]] можно поймать по эмбеддингам. [[Вики/Concept shift\|Concept shift]] требует дополнительно анализировать клики пользователей…

• answerЧто такое representation engineering (RepE) и зачем он нужен?

  …Этот вектор называется **концептуальным направлением (direction|concept direction)**. Процесс состоит из двух этапов: ### 2.1 Извлечение направления (Extraction) - Берём набор…

• answerКак работает DoRA (Weight-Decomposed LoRA) и чем лучше LoRA?

  …magnitude (масштаб/норма) и [[Вики/Concept direction\|direction]] (направление). В [[Вики/DoRA\|DoRA]] обучается только направление через низкоранговую адаптацию (как…

• answerКак вы мониторите дрейф данных (data drift) для RAG?

  …Различие между data drift, concept drift и model drift в RAG | Тип дрейфа | Определение | Проявление в RAG | |-------------|-------------|------------------| | [[Вики/metric drift…

• answerКак вы измеряете drift retrieval-качества в RAG (когда документы меняются)?

  …Что такое data drift и concept drift в ML\|15]] | Фундаментальные понятия дрейфа | | [[20. Как вы проводите A/B тестирование…

• answerКак вы делаете query rewriting и query expansion в RAG?

  …методы ### 4.1 Synonym expansion (синонимическое расширение) Использование тезаурусов ([[Вики/WordNet\|WordNet]], [[Вики/ConceptNet\|ConceptNet]]) или списков синонимов для добавления…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Настроить expert parallelism для Mixtral

  …Создать тестовый промпт ```python tokenizer = AutoTokenizer.from_pretrained("mistralai/Mixtral-8x7B-Instruct-v0.1") prompt = "[INST] Explain the concept of…

• answerЧто такое эволюция (evolution) в Harness Engineering (component registry, drift detection)?

  …поиск\|RAG]], если база знаний обновляется). - [[Вики/data drift\|Concept drift]] — изменилось восприятие «правильного ответа» (например, под новые требования бизнеса…

• answerКак вы измеряете и оптимизируете TTFT (Time To First Token) и TPOT (Time Per Output Token)?

  …pretrained(model_name, device_map="auto") prompt = "Explain the concept of TTFT in one sentence." inputs = tokenizer(prompt, return_tensors…

• answerКак в Harness Engineering реализована эвалюация и дрейф (evaluation & drift)?

  …Сравнение с традиционным ML drift | Аспект | Классический ML (data/concept) | AI-агент (behavioral) | |--------|-------------------------------|------------------------| | Объект дрейфа | Распределение признаков или целевой переменной…

• answerЧто такое synthetic eval collapse и как его предотвратить?

  …и $P_{[[Вики/real data\|real]]}$. - [[Вики/data drift\|Concept drift]] — изменение реального распределения со временем (например, пользователи начинают задавать…

• answerКак вы отслеживаете data drift для распределения запросов к RAG?

  …начали задавать вопросы на другую тему). - [[Вики/data drift\|Concept drift]] — изменение смысла одних и тех же запросов (например, [[Вики…

• answerКак вы измеряете дрейф модели (model drift) для LLM?

  …новую тему (например, про новый продукт) | | [[Вики/data drift\|Concept drift]] | Изменение связи между входом и желаемым выходом | Раньше ответ…

• answerЧто вы видите следующим горизонтом после language representation?

  …Prover | | Differentiable | Символьные операции аппроксимируются дифференцируемыми функциями | Neuro-Symbolic Concept Learner | Для [[Вики/Agentic RAG\|Agentic RAG]] [[Вики/agent\|агент…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Реализовать market-based делегирование

  …Симуляция с asyncio Tasks (корутинами) — достаточно для proof-of-concept. | | Как измерить эффективность, если истинная стоимость неизвестна | Сравнение с cheapest…

• answerКак вы проектируете агента, который может работать непрерывно (24/7) без дрейфа поведения?

  …Основные причины - [[Вики/metric drift\|Data drift]] — изменение статистических свойств входных данных (например, новые темы запросов). - [[Вики/data drift\|Concept…

• answerКак работают agent swarms (рой агентов)?

  …Простая реализация роя на Python (asyncio) Покажем минимальный proof-of-concept: ```python import asyncio import random class Agent: def __init…

• answerКак вы проектируете систему для continuous learning LLM-агента в production — чтобы агент улучшался от взаимодействий с пользователями без переобучения на шум и без катастрофического забывания?

  …continuous learning агент со временем устаревает (data drift, drift|concept drift). - Пользовательский [[Вики/Feedback mechanism\|фидбек]] — самый ценный источник сигнала…

• answerКак вы делаете data quality monitoring для RAG корпуса?

  …Также важен **[[Вики/data drift\|concept drift]]** — изменение смысла запросов пользователей, но это уже относится к мониторингу [[Вики/retrieval\|retrieval…

• answerКак выполнять requirement on transparency (статья 13 EU AI Act) для LLM?

  …Можно продемонстрировать на собеседовании как proof of concept. --- ## Связь с другими вопросами | Вопрос | Тема | |--------|------| | [[730. Что такое LLM для symbolic…

• answerКак работает vision encoder в GPT-4V / LLaVA?

  …на датасете CC3M (Conceptual Captions) — 3 млн пар изображение-подпись. Замораживается vision encoder и LLM, обучается только проектор. Цель: научиться…

• wikiИндекс терминов

  …computer use agent]] - [[Вики/Concept direction|Concept direction]] - [[Вики/Concept shift|Concept shift]] - [[Вики/ConceptNet|ConceptNet]] - [[Вики/conciseness|conciseness]] - [[Вики…