Поиск

• wikifailure analysis

  # failure analysis ## Определение Анализ отказов (failure analysis) — процесс систематического исследования причин сбоев в работе LLM-системы для повышения её надёжности…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Измерить KPD (коэффициент полезного делегирования)

  …Улучшение KPD до >0.9 (1 час) Действия 1. [[Вики/failure analysis\|Анализ ошибок]] Выписать 5–10 ошибочных ответов, понять…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Реализовать hallucination indicator (индикатор галлюцинаций)

  …print(classification_report(y_true, y_pred)) ``` 2. [[Вики/failure analysis\|Анализ ошибок]] - Выпишите 3–5 случаев ложноположительных и ложноотрицательных…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Профилировать network congestion на 64 GPU

  …2. [[Вики/failure analysis\|Анализ ошибок]] и повторных передач ```python import pandas as pd df = pd.read_csv('perf_allreduce…

• practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Написать postmortem для retrieval degradation

  …cause в ML-системах | | 356 | Использование "5 почему" в failure analysis | | 401 | Шаблон postmortem для AI-систем | | 512 | Процесс принятия…

• answerЧто такое meta-evaluation бенчмарков (оценка оценки)?

  …2. [[Вики/failure analysis\|Анализ ошибок]]: если [[Вики/model\|модель]] ошибается на задаче, то тип [[Вики/ошибки\|ошибки]] должен соответствовать…

• indexПРАКТИЧЕСКИЙ ЧЕКЛИСТ: СТАFF+ AI SYSTEMS ENGINEERING

  …как часто пользователь копирует, кликает|Trust score| --- ## Категория 10: FAILURE ANALYSIS & POSTMORTEMS (10 задач) | # | Задача | Что нужно сделать | Признак успеха…

• wikiИндекс терминов

  …Failover threshold]] - [[Вики/Failover time|Failover time]] - [[Вики/failure analysis|failure analysis]] - [[Вики/Failure Blocking|Failure Blocking]] - [[Вики/failure cases…

• indexОглавление

  …trust метрику\|90. Реализовать user trust метрику]] ### Категория 10: Failure Analysis & Postmortems - [[Практика/Подробное описание/91. Написать postmortem для retrieval…