Вероятность и статистика · объяснение и практика

Согласованные и несогласованные пары: как читать коэффициент Кендалла

Измеряем согласованность двух порядков через пары объектов. Считаемτa без совпадений, проверяем число сравнений и отделяем знак порядка от величины числовых промежутков.

Рука ставит оранжевый столбик между двумя синими столбиками разной высоты.

В теме Связь признаков и регрессия · Учебная карта

Главная мысль

Для n≥2 объектов без одинаковых значений внутри каждого признака каждая неупорядоченная пара либо согласована, либо несогласована. Если при росте x растёт y, пара согласована; если y уменьшается —несогласована. Коэффициент Кендаллаτa=(C−D)/[n(n−1)/2] сравнивает их количества. При совпадениях нужны явно выбранное правило и вариант коэффициента; здесь они исключены условием.

Сравниваем два объекта, а не две соседние строки

У каждого объекта есть значения x и y. Выберем два разных объекта i,j. Знак произведения(xᵢ−xⱼ)(yᵢ−yⱼ) положителен при согласованности и отрицателен при противоположном порядке. Ориентация перечисления пары не важна: если поменять i,j местами, оба множителя сменят знак, а произведение сохранится. Поэтому каждую пару считают один раз, а не удваивают её перестановкой обозначений.

Всего таких пар n(n−1)/2. Для четырёх объектов их шесть, а не три: сравниваются не только соседние в таблице. При отсутствии связок C+D должно дать именно это число. Такая проверка ловит пропущенные сравнения. Численная величина расстояний между признаками не влияет на классификацию пары: для знака достаточно знать, какой из двух объектов выше по каждому порядку.

Полный список сравнений делает ответ проверяемым

Упорядочим четыре объекта по возрастающему x и запишем соответствующие y:1,4,2,3. Первый y=1 согласован со всеми тремя последующими. Значение 4 образует две несогласованные пары с 2 и 3. Последняя пара 2,3 согласована. Получается C=4,D=2,τa=(4−2)/6=1/3. Порядки частично согласованы, хотя один большой y находится раньше двух меньших.

После упорядочивания по x несогласованные пары становятся инверсиями последовательности y. Это позволяет независимо проверить счёт. Но сами пары нельзя терять: сортировка столбца y отдельно создала бы другую таблицу и ложное идеальное согласие. Также не следует заменять подсчёт пар корреляцией числовых значений —она отвечает на другой вопрос и может давать другое число даже при том же направлении связи.

Пример

Три объекта по возрастанию x имеют y=[6,2,9]. Найдите C,D иτa.

Пара 6,2 несогласована, пары 6,9 и 2,9 согласованы. Поэтому C=2,D=1,всего 3 пары. τa=(2−1)/3=1/3. Величины промежутков 4,3 и 7 не входят в формулу: используются только направления сравнений.

Нулевая разность меняет исходные условия

Если два объекта имеют одинаковый x или одинаковый y, произведение разностей равно нулю. Такая пара не является ни строго согласованной, ни строго несогласованной. В литературе используются вариантыτa,τb и другие соглашения, по-разному учитывающие совпадения. Программа может выдаватьτb по умолчанию, поэтому нельзя ожидать согласия результатов без проверки определения. В нашей простой модели связок нет, и все пары однозначно входят в C или D.

Строго возрастающие преобразования признаков сохраняют классификацию каждой пары. Полное обращение одного порядка меняет знак коэффициента. Ноτa=0 не доказывает независимость признаков и не объясняет, почему появились различия. Это описание согласованности двух наблюдённых порядков. Для вывода о причине, устойчивости результата или большей совокупности требуются отдельные данные и статистические предпосылки, которых один счёт пар не создаёт.

От чтения к действию

А теперь — вы

Для 5 объектов без связок из 10 пар 6 согласованы и 4 несогласованы. Каковτa?

Частые вопросы

Почему знаменатель не равен n−1?

Сравниваются все неупорядоченные пары объектов, а не только соседние строки. Их n(n−1)/2.

Можно сразу применять этот пример к множеству одинаковых рангов?

Нет. При совпадениях нужно назвать вариант коэффициента и правило учёта связанных пар. Здесь условие исключает такие случаи.

Источники и работа с материалом

Объяснение, примеры и вопросы написаны для erudeet. Факты и определения сверены по источникам ниже; это ссылки для самостоятельной проверки.

Продолжить разбираться