Оценка согласованности мнений экспертов

Оценка согласованности мнений экспертов

Для оценки согласованности мнений экспертов относительно ранжированных объектов использовался  коэффициент конкордации W, расчет которого при совпадении ранговых оценок у одного и того же эксперта производится по формуле:

,

где S — сумма квадратов отклонений, определяемая по формуле:

          где r_ij— оценка экспертом j объекта i;

          m— число экспертов;

          n — количество ранжируемых объектов.

,

    где t_j — число одинаковых рангов в j–ом ряду.

Обязательным условием использования методов ранговой корреляции в отношении ранжированных объектов является равенство числа рангов числу оцениваемых объектов, т.е. сумма рангов такого ряда должна быть равна:

Выполнение данного условия позволяет обеспечить стандартное ранжирование — целям, имеющим одинаковые ранги, присваивается стандартизированный ранг, значение которого представляет среднее мест, поделенных между собой целями с одинаковыми рангами.

Абсолютная величина коэффициента конкордации не должна превышать единицы. Для обоснования суждения о наличии связи необходимо проверить полученные коэффициенты на значимость.

Считается, что величина mW(n–1) имеет l²–распределение с n=n–1 степенями свободы. В случае совпадения некоторых рангов l²–распределение определяется:

Для оценки значимости коэффициента конкордации необходимо и достаточно, чтобы найденное  l²  было больше табличного, определяемого числом степеней свободы n и уровнем доверительной вероятности, принимаемой в размере 0,95–0,99.