Exact Match Name

Exact Match Name

Определение

Exact Match Name (EMN) — метрика, оценивающая точность совпадения предсказанного имени функции с истинным именем в задаче Function Calling (tool use). Целевое значение метрики обычно превышает 95%, что говорит о высокой точности модели при выборе правильного инструмента. EMN является частным случаем более общей метрики точного совпадения (Exact Match), но фокусируется исключительно на имени функции, игнорируя аргументы.

Где встречается

Навигация