07.10.2009 Время чтения: 3 минуты

Трехкомпонентная оценка пар в телешоу "Ледниковый период"


Редакция Ht.ru, А. Г. Шмелев
28 ноября, 2007


div class="Text">Всем, кто читал статью «Ошибки в субъективных экспертных оценках», и особенно тем, кто участвовал сам в голосовании по трем критериям, будет интересно познакомиться с таблицей результатов:

Пара
Среднее по Технике и Артистизму
Среднее трех показателей
Техника
Артистизм
Прогресс
Чулпан Хаматова и Роман Костомаров
5.951
5.885
5.94
5.97
5.75
Алиса Гребенщикова и Алексей Тихонов
5.900
5.893
5.87
5.93
5.88
Татьяна Навка и Вилле Хаапасало
5.865
5.838
5.85
5.88
5.78
Ирина Лобачева и Дмитрий Марьянов
5.862
5.864
5.83
5.90
5.87
Елена Леонова и Григорий Сиятвинда
5.853
5.857
5.85
5.86
5.87
Маргарита Дробязко и Александр Дьяченко
5.849
5.853
5.84
5.86
5.86
Мария Петрова и Михаил Галустян
5.828
5.860
5.72
5.93
5.92
Анна Семенович и Алексей Макаров
5.784
5.778
5.72
5.84
5.77
Лариса Вербицкая и Повилас Ванагас
5.741
5.740
5.71
5.77
5.74
Александра Савельева и Сергей Сахновский
5.708
5.703
5.68
5.74
5.69
Анастасия Волочкова и Антон Сихарулидзе
5.705
5.701
5.68
5.72
5.69
Албена Денкова и Игорь Верник
5.701
5.692
5.62
5.78
5.67
Татьяна Тотьмянина и Никита Малинин
5.526
5.527
5.51
5.54
5.53
Ольга Кабо и Максим Маринин
5.520
5.503
5.49
5.55
5.47
Виктория Дайнеко и Алексей Ягудин
5.504
5.462
5.48
5.53
5.38
Анастасия Мыскина и Андрей Хвалько
5.439
5.293
5.43
5.45
5.00
Таблица. СРЕДНИЕ ЗНАЧЕНИЯ ДЛЯ 100 ПЕРВЫХ «СУДЕЙ-ТЕЛЕЗРИТЕЛЕЙ» НА МОМЕНТ 27 НОЯБРЯ.
В данном случае пары упорядочены по убыванию значения в первом столбце – того самого значения, по которому в шоу определяются победы и поражения (уход в номинацию). Легко увидеть, что выделение показателя «Прогресс» в качестве отдельного и самостоятельного привело к тому, что «все встало на свои места». Действительно, пара Хаматова-Костомаров (как известно, лучшая пара по количеству первых мест на телепроекте) по третьему показателю далеко не лидер. Здесь лидирует пара Петрова-Галустян. Но зато «очищенные» от примеси иного показателя («прогресса») два традиционных показателя «техника» и «артистизм» уверенно выводят пару Хаматова-Кастомаров на первое место со значительным отрывом.
В какой степени этому «зрительскому рейтингу» можно доверять? – В достаточно высокой степени. Дело в том, что между судьями-экспертами обнаружено высокое значение показателя согласованности – 0,766. Это значительно выше среднего такого показателя для аналогичных процедур. Это говорит о том, что большинство участников высоко согласованы друг с другом по большинству пар (хотя каждый из судей, возможно, в каких-то одном-двух случаях проявлял и субъективизм – в силу особых симпатий, или особых антипатий). Интересно отметить, что по лидерам рейтинга народные судьи более согласованны между собой, чем по тем парам, которые оказываются в нижней части списка – там в большей мере включается пристрастность.
Также следует обратить внимание и на такой существенный факт: оценки телезрителей в целом оказались НИЖЕ, чем оценки членов жюри, которые работают в зале Мосфильма, где проходят съемки. Чем это можно объяснить? – Ведь это никак не объяснишь тем, что телезрители, принявшие участие в голосовании, хуже относятся к этому телепроекту, чем члены жюри: они ведь бескорыстно потратили свое время на голосование (экспертный опрос), в котором вынесли каждый в общей сложности около полусотни оценок (16 пар Х 3 критерия = 48 оценок). Единственное убедительное объяснение подтверждает один из главных тезисов, сформулированных в моей статье, открывшей обсуждение судейских (экспертных) технологий на нашем сайте www.ht.ru:
наши судьи (телезрители) были более независимыми в своих оценках, на них менее давили факторы «скандирующего зала», суждения других судей, личное знакомство с фигуристами или стремление по достоинству оценить удивительный прогресс, достигнутый многими парами, которые еще вчера катались явно неуверенно.
Стоит, наверное, (следуя традициям подобных экспертных игр на нашем сайте) указать ники (краткие сетевые псевдонимы) тройки лучших судей – тех, кто показал наибольшую согласованность своих оценок с оценками большинства других участников:
1. Ilya
2. fluke
3. lina
Теперь мы будем держать ДЛЯ ЖЕЛАЮЩИХ ПОУЧАСТВОВАТЬ на нашем сайте дальнейшее голосование уже с открытом доступом респондентов не только к рейтингу согласованности (между судьями), но и более интересному для многих рейтингу самих артистов - ссылка
Хотя следует предупредить, что на сайте рейтинг приводится в масштабе десятибалльной шкалы, а здесь в таблице дается перевод в традиционную для фигурного катания шкалу оценок. Так чтобы было легче сравнить «народные оценки» с теми, которые выставляет авторитетное жюри на самом телепроекте.

 

0 комментариев
Написание комментария требует предварительной регистрации на сайте

Войти с помощью:

Войти как пользователь
Вы можете войти на сайт, если вы зарегистрированы на одном из этих сервисов:
Комментариев пока нет, будьте первым
Хотите подобрать тест для оценки?

В нашем арсенале более 30 тестов оценки личностных, мотивационных особенностей, IQ, управленческого потенциала, рискованного поведения, самопознания и др.

Оставьте заявку на бесплатную консультацию специалиста!

Перейти в каталог тестов