Inter‑annotator Agreement
Inter‑annotator Agreement
Определение
Inter‑annotator Agreement (межэкспертное согласие) — метрика, показывающая степень согласованности между разными экспертами (аннотаторами) при разметке данных. Значение обычно находится в диапазоне 50–80%, что означает неидеальное, но приемлемое для обучения моделей согласие. Используется для оценки качества разметки и выявления неоднозначных примеров.