Kendall tau distance

Kendall tau distance

Определение

Kendall tau distance — это метрика, измеряющая различие между двумя ранжированиями по числу инвертированных пар элементов. Она равна количеству пар (i, j), для которых порядок i и j в одном ранжировании противоположен порядку в другом. Нормированная версия (деление на общее число пар) принимает значения от 0 (полное совпадение) до 1 (полная противоположность).

Где встречается

    1. Как собирать preference data для RLHF? (A/B сравнение ответов, ranking, Elo score)

Навигация