Поиск
- wikirate
…Настроить cost tracking в production]] - [[188. Настроить monitoring сообщений|188. Настроить monitoring сообщений]] - [[262. Настроить дашборд для failures|262. Настроить…
- wikiClickHouse
…Как вы бенчмарките DSPy против ручного промпт-инжиниринга в production]] - [[801. Как делать AB тестирование промптов в production|801. Как…
- wikiPromQL
…Настроить cost tracking в production|132. Настроить cost tracking в production]] - [[139. Настроить cost attribution per feature|139. Настроить cost…
- practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Настроить дашборд для failures
…ошибок в production LLM | | 221 | Настройка RAG-системы | | 258 | Метрики для детекции галлюцинаций | | 260 | Алерты на failures | | 261 | Postmortem для…
- wikiключевой поиск
…Какие 3 книгикурса вы рекомендуете по production LLM|80. Какие 3 книгикурса вы рекомендуете по production LLM]] - [[233. Как вы…
- wikipandas
…Настроить дашборд для failures|262. Настроить дашборд для failures]] - [[266. Сгенерировать synthetic датасет для RAG|266. Сгенерировать synthetic датасет для…
- answerКак вы обрабатываете corrupted или empty документы в ingestion пайплайне?
…Пример метрики [[Вики/Grafana\|Prometheus]]: ```python from prometheus_client import Counter, Histogram INGESTION_FAILURES = Counter('ingestion_failures_total', 'Total ingestion…
- wikiгибридный поиск
…Какие 3 книгикурса вы рекомендуете по production LLM|80. Какие 3 книгикурса вы рекомендуете по production LLM]] - [[116. Как вы…
- wikitimeout
…Полный production агент|250. Полный production агент]] - [[262. Настроить дашборд для failures|262. Настроить дашборд для failures]] - [[286. Реализовать hierarchical…
- wikiPrompt engineering
…Как вы AB тестируете две версии промпта в production|502. Как вы AB тестируете две версии промпта в production]] - [[508…
- wikigold standard
…Как вы делаете hybrid search (vector + keyword) в production на 10M документов|233. Как вы делаете hybrid search (vector + keyword…
- answerКак проектировать graceful degradation при отказе vector DB?
…self.failures += 1 logger.warning(f"Health check не удался ({self.failures}/{self.threshold}): {e}") if self.failures >= self.threshold…
- answerКакие метрики вы мониторите для LLM в production?
…Какие метрики вы мониторите для LLM в production? ## Краткий тезис [[Вики/мониторинг в production\|Мониторинг]] [[Вики/LLM\|LLM]] в [[Вики…
- answerКак сделать агента самовосстанавливающимся (self-healing)?
…result = await tool_func(*args) self.failures = 0 # success → reset self.state = "closed" return result except Exception: self.failures += 1…
- answerЧто такое circuit breaker и как он применяется к LLM API вызовам?
…Мониторинг и метрики Для production-системы нужно отслеживать: - Текущее состояние каждого breaker (closed/open/half-open) — метка в Prometheus. - Количество…
- answerЧто такое **agent distillation** (обучение маленького агента на траекториях большого)?
…Применение в production После дистилляции маленький агент может быть развёрнут: - На edge-устройствах (мобильные приложения, IoT) с ограниченной памятью. - Высоконагруженные…
- answerЧто такое «chaos testing» для агента (внезапно API вернул ошибку)?
…Зачем нужно chaos testing для агентов AI-агенты всё чаще используются в production-сценариях (поддержка клиентов, бронирование, анализ данных). Отказоустойчивость…
- indexИндекс разборов
…Как вы переносите агента из прототипа в production (MLOps)\|58. Как вы переносите агента из прототипа в production (MLOps)?]] - [[59…
- indexОглавление
…Настроить дашборд для failures\|262. Настроить дашборд для failures]] - [[Практика/Подробное описание/263. Реализовать автоматический postmortem\|263. Реализовать автоматический postmortem…
- practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Реализовать retry storm mitigation (exponential backoff + jitter)
…Код может быть использован как reference-реализация для production-систем. Опционально - Дополнительный сценарий с равномерным jitter (equal jitter) и сравнение…
- question_bankЧАСТЬ 1: RAG-СИСТЕМЫ (20 вопросов)
…Какую векторную БД вы выберете для production-системы с >1 млн векторов?** **Структура ответа:** - **[[Вики/Faiss\|Qdrant]]:** лучший для [[Вики…
- indexПРАКТИЧЕСКИЙ ЧЕКЛИСТ: СТАFF+ AI SYSTEMS ENGINEERING
…PROMPT MANAGEMENT (15 задач) *Практика управления промптами в [[Вики/production\|production]].* | # | Задача | Что нужно сделать | Признак успеха | |---|--------|-------------------|-----------------| | 161 | Развернуть Prompt…
- wikiИндекс терминов
…Ollama не отвечает]] - [[Вики/Failure modes|Failure modes]] - [[Вики/failure point|failure point]] - [[Вики/failures_total|failures_total]] - [[Вики/failureThreshold…