Ответ в темуСоздание новой темыСоздание опроса

> Рейтинг судей, обсуждение
Mavlat
Дата 30.11.2009 - 16:38
Цитировать сообщение




Старожил
*****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 261
Пользователь №: 669
Регистрация: 12.01.2009





РЕЙТИНГ СУДЕЙ (ПРЕДЛОЖЕНИЕ)
---------------------------
Для оценки деятельности действующих судей предлагается ввести единый рейтинг, на который будут оказывать влияние, в зависимости от значимости, следующие критерии:

- количество "крестов", не проставленных финалистам в отборочных турах
- количество "единичных крестов", проставленных не прощедшим в следующий тур парам (пара не прошла в следующий тур и получила только один крест)
- количество "крестов", не проставленных прощедшим в следующий тур парам, недополучившим одного креста до "всех" (пара прошла в следующий тур и получила все кресты кроме одного)
- количество "крестов", проставленных не прошедшим в следующий тур парам
- количество "крестов", не проставленных прошедшим в следующий тур парам
- Разница в оценках относительно занятого места парой (судья поставил 6-е место, а пара заняла 3-е. Разница = 3)

------------------------------------------------------------------------------------

Максимальный рейтинг, который может получить судья равен 200 баллам. Итоговый рейтинг вычисляется при вычете штрафных баллов за каждый критерий оценки.
Далее приведено распределение влияния критериев оценки на итоговый рейтинг:

1. КОЛИЧЕСТВО "КРЕСТОВ", НЕ ПРОСТАВЛЕННЫХ ФИНАЛИСТАМ, В ОТБОРОЧНЫХ ТУРАХ
Штрафные баллы изменяются в зависимости от отборочного тура (чем дальше от финала тур, тем больше штрафные баллы).
Отборочный тур - штраф за не проставленный "крест":
1/2 финала - 1 балл
1/4 финала - 2 балла
1/8 финала - 4 балла
1/16 финала - 8 баллов
1/32 финала - 16 баллов
1/64 финала - 32 балла

2. КОЛИЧЕСТВО "ЕДИНИЧНЫХ КРЕСТОВ", ПРОСТАВЛЕННЫХ НЕ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ (ПАРА НЕ ПРОШЛА В СЛЕДУЮЩИЙ ТУР И ПОЛУЧИЛА ТОЛЬКО ОДИН КРЕСТ
Влияние этого критерия предлагаю оценить
4 штрафных балла за крест
Примечание 1: Если танцуется 2 танца, судья проводит пару в следующий тур в 2-х танцах и пара набирает 2 креста, то судье начисляется 8 баллов.
Примечание 2: В критерии №5 к этому кресту добавится еще 1 балл. ИТОГО: суммарная оценка за такой "крест" будет 5 баллов

3. КОЛИЧЕСТВО "КРЕСТОВ", НЕ ПРОСТАВЛЕННЫХ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ, НЕДОПОЛУЧИВШИМ ОДНОГО КРЕСТА ДО "ВСЕХ" (ПАРА ПРОШЛА В СЛЕДУЮЩИЙ ТУР И ПОЛУЧИЛА ВСЕ КРЕСТЫ КРОМЕ ОДНОГО)
Влияние этого критерия предлагаю оценить
4 штрафных балла за крест
Примечание 1: Если танцуется 2 танца, судья не проводит пару в следующий тур в 2-х танцах и пара набирает все кресты, кроме 2-х, то судье начисляется 8 баллов.
Примечание 2: В критерии №4 к этому кресту добавится еще 1 балл. ИТОГО: суммарная оценка за такой "крест" будет 5 баллов


4. КОЛИЧЕСТВО "КРЕСТОВ", НЕ ПРОСТАВЛЕННЫХ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ
Влияние этого критерия предлагаю оценить
1 штрафной балл за крест
Примечание 1: Если танцуется 2 танца, то баллы начисляются отдельно по каждому танцу.
Примечание 2: Считаются все туры кроме 1/2 финала

5. КОЛИЧЕСТВО "КРЕСТОВ", ПРОСТАВЛЕННЫХ НЕ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ
Влияние этого критерия предлагаю оценить
1 штрафной балл за крест
Примечание 1: Если танцуется 2 танца, то баллы начисляются отдельно по каждому танцу.
Примечание 2: Считаются все туры кроме 1/2 финала


6. РАЗНИЦА В ОЦЕНКАХ ОТНОСИТЕЛЬНО ЗАНЯТОГО МЕСТА ПАРОЙ
Начисляются в зависимости от разницы в оценках относительно занятого места парой.
Разница -> баллы
0-1 -> 0 баллов
2 -> 1 балл
3 -> 2 балла
4 -> 4 балла
5 -> 8 баллов
6 -> 16 баллов
Примечание: Если танцуется 2 танца, то баллы начисляются по каждому танцу отдельно

------------------------------------------------------------------------------------

Рейтинг, составленный на основании указанного алгоритма по результатам ЧР 2009 номинация Хастл-Абсолют:

1. КОЛИЧЕСТВО "КРЕСТОВ", НЕ ПРОСТАВЛЕННЫХ ФИНАЛИСТАМ, В ОТБОРОЧНЫХ ТУРАХ
30 (A) - Сурожская Анна
21 (В) - Джошкун (Горшкова) Анастасия
18 (С) - Коньков Андрей
7 (F) - Полканова Анастасия
6 (D) - Ларин Андрей
6 (G) - Харчевникова Юлия
2 (E) - Козлова Елена

2. КОЛИЧЕСТВО "ЕДИНИЧНЫХ КРЕСТОВ", ПРОСТАВЛЕННЫХ НЕ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ (ПАРА НЕ ПРОШЛА В СЛЕДУЮЩИЙ ТУР И ПОЛУЧИЛА ТОЛЬКО ОДИН КРЕСТ
24 (D) - Ларин Андрей
20 (В) - Джошкун (Горшкова) Анастасия
16 (A) - Сурожская Анна
16 (G) - Харчевникова Юлия
12 (F) - Полканова Анастасия
4 (E) - Козлова Елена
4 (С) - Коньков Андрей

3. КОЛИЧЕСТВО "КРЕСТОВ", НЕ ПРОСТАВЛЕННЫХ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ, НЕДОПОЛУЧИВШИМ ОДНОГО КРЕСТА ДО "ВСЕХ" (ПАРА ПРОШЛА В СЛЕДУЮЩИЙ ТУР И ПОЛУЧИЛА ВСЕ КРЕСТЫ КРОМЕ ОДНОГО)
36 (D) - Ларин Андрей
12 (В) - Джошкун (Горшкова) Анастасия
12 (A) - Сурожская Анна
12 (С) - Коньков Андрей
8 (G) - Харчевникова Юлия
8 (F) - Полканова Анастасия
8 (E) - Козлова Елена

4. КОЛИЧЕСТВО "КРЕСТОВ", НЕ ПРОСТАВЛЕННЫХ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ
25 (D) - Ларин Андрей
20 (В) - Джошкун (Горшкова) Анастасия
20 (A) - Сурожская Анна
18 (G) - Харчевникова Юлия
18 (E) - Козлова Елена
18 (F) - Полканова Анастасия
14 (С) - Коньков Андрей

5. КОЛИЧЕСТВО "КРЕСТОВ", ПРОСТАВЛЕННЫХ НЕ ПРОШЕДШИМ В СЛЕДУЮЩИЙ ТУР ПАРАМ
16 (D) - Ларин Андрей
11 (В) - Джошкун (Горшкова) Анастасия
11 (A) - Сурожская Анна
9 (G) - Харчевникова Юлия
8 (F) - Полканова Анастасия
6 (С) - Коньков Андрей
2 (E) - Козлова Елена

6. РАЗНИЦА В ОЦЕНКАХ ОТНОСИТЕЛЬНО ЗАНЯТОГО МЕСТА ПАРОЙ
11 =6+5 (С) - Коньков Андрей
9 =5+4 (D) - Ларин Андрей
5 =1+4 (A) - Сурожская Анна
3 =2+1 (G) - Харчевникова Юлия
2 =0+2 (F) - Полканова Анастасия
2 =0+2 (E) - Козлова Елена
0 =0+0 (В) - Джошкун (Горшкова) Анастасия

РЕЙТИНГ (ШТРАФНЫЕ БАЛЛЫ):

164 (36=2+4+8+18+2+2) (E) - Козлова Елена
145 (55=7+12+8+18+8+2) (F) - Полканова Анастасия
140 (60=6+16+8+18+9+3) (G) - Харчевникова Юлия
135 (65=18+4+12+14+6+11) (С) - Коньков Андрей
116 (84=21+20+12+20+11+0) (В) - Джошкун (Горшкова) Анастасия
106 (94=30+16+12+20+11+5) (A) - Сурожская Анна
84 (116=6+24+36+25+16+9) (D) - Ларин Андрей


ПРИМЕЧАНИЕ 1: Данный рейтинг предлагается вести для рейтинговых номинаций (по которым начисляются очки). Если таких номинаций на турнире две, то рейтинг за турнир берется средний из двух.
ПРИМЕЧАНИЕ 2: Итоговый рейтинг вычисляется как средний между действующим и рассчтанным на пройденном турнире.
ПРИМЕЧАНИЕ 3: Рейтинг нужно обнулять раз в год для формирования нового.

P.S.: Предлагаю вынести эту тему в отдельную ветку!
PMПисьмо на e-mail пользователюСайт пользователя
Top
Parahod
Дата 1.12.2009 - 02:47
Цитировать сообщение




Старожил
*****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 271
Пользователь №: 31
Регистрация: 26.03.2008





извините ребяты что вмешиваюсь в разговор, вот я как бы судья, но некоторым финалистам в некоторых отборочных реально не поставил бы креста тупо зы потерю баланса на бэйсике.
грубейшие ошибки. хуже только потеря ритма.

статистика статистикой, но... иногда судье хватает смелости забить на фамилию будущего финалиста, и тогда ... какие тут кресты ?
и какая тут на фиг статистика ?

я сдавал первый раз аттестацию (которую не сдал), и пару Д класса занявшую 1е место спустил на 4-5е. меня спросили:
- за что ?
- пара танцевала трешку 16 счетов.

я стоял и считал косяки пары, а остальные судьи их уже давно просудили
и не смотрели на их творчество.

если судья будет боятся статистики то финалы всех конкурсов буду расписаны на год вперед.
PMПисьмо на e-mail пользователю
Top
Mavlat
Дата 1.12.2009 - 10:35
Цитировать сообщение




Старожил
*****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 261
Пользователь №: 669
Регистрация: 12.01.2009





Parahod
По-моему, система, которую мы обсуждаем, должна оценивать уровень судьи, не лишая его при этом личного мнения. Это сложно, поэтому я и предложил вынести это на обсуждение. И очень приятно, что судьи присоединились к нему wink.gif
PMПисьмо на e-mail пользователюСайт пользователя
Top
Makedonsky
Дата 1.12.2009 - 10:47
Цитировать сообщение




Мудрец
*********

Профиль
Группа: Администраторы
Сообщений: 3278
Пользователь №: 4
Регистрация: 13.02.2008





Я разделяю опасения Парахода, но насколько я понимаю Юру - речь пока идет просто о сборе статистики, а не о каких-либорешениях или санкциях на ее основе.

По сути Юра имеет полное право самостоятельно эту статистику вести и публиковать - и никто не может этого запретить.

Думаю что идея интересная и было бы любопытно посмотреть результаты на примере 3-5 турниров.

Вопрос только в том, кто и как будет эту статистику вести.
Юра, ты готов за это взяться на постоянной основе?

Это сообщение отредактировал Makedonsky - 1.12.2009 - 10:49


--------------------
РК АСХ
PMПисьмо на e-mail пользователюСайт пользователя
Top
Mavlat
Дата 1.12.2009 - 11:09
Цитировать сообщение




Старожил
*****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 261
Пользователь №: 669
Регистрация: 12.01.2009





Makedonsky
Лишать никого и ничего я не предлагаю smile.gif
Если это действительно будет интересно, то давайте попробуем на 3-5 турнирах, а там будет видно.

P.S.: Жду Ваших комментов к системе...
PMПисьмо на e-mail пользователюСайт пользователя
Top
_RL_
Дата 1.12.2009 - 11:26
Цитировать сообщение




Завсегдатай
****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 125
Пользователь №: 161
Регистрация: 15.04.2008





Parahod
Цитата
я сдавал первый раз аттестацию (которую не сдал), и пару Д класса занявшую 1е место спустил на 4-5е. меня спросили:
- за что ?
- пара танцевала трешку 16 счетов.

я стоял и считал косяки пары, а остальные судьи их уже давно просудили
и не смотрели на их творчество.

Это конечно с точки зрения вселенской справедливости не очень хорошо...

Но ведь судьи тоже люди. Если пара априори намного лучше других, ее почти сразу просуживают, и обращают наибольшее внимание на другие пары, скажем так, "спорные", т.е. решение о допуске в следующий тур по которым неоднозначно для данного судьи.
Это закон жизни.
PMПисьмо на e-mail пользователю
Top
Parahod
Дата 1.12.2009 - 11:54
Цитировать сообщение




Старожил
*****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 271
Пользователь №: 31
Регистрация: 26.03.2008





_RL_
да это всё понятно. я никого нифчом не обвиняю.
в конце концов реально можно что-то не увидеть.
PMПисьмо на e-mail пользователю
Top
_RL_
Дата 1.12.2009 - 12:04
Цитировать сообщение




Завсегдатай
****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 125
Пользователь №: 161
Регистрация: 15.04.2008





Mavlat
Система расчета "качества" понятна и логична с точки зрения чистой математики.
Но мне совершенно непонятно, как интерпретировать эти результаты. К тому же, на ЧР судя по статистике все судьи как раз показали завидную сходимость. И даже в этом случае я не могу сказать, плохо это или хорошо. Это может быть хорошо с т.з. стабильности судейства, а с другой стороны опять же свидетельствовать тупо о расставлении мест по именам.

Да, существенная дисперсия (судейство близко к генератору случайных чисел)может вести к определенным выводам по данному судье. Но это крайне маловероятный случай, такого я не видел на конкурсах еще.
PMПисьмо на e-mail пользователю
Top
Mavlat
Дата 1.12.2009 - 15:34
Цитировать сообщение




Старожил
*****

Профиль
Группа: Судья или руководитель клуба
Сообщений: 261
Пользователь №: 669
Регистрация: 12.01.2009





_RL_
Так или иначе. Решает мнение большинства в судейской бригаде. Если один судья "не увидел", а остальные "увидели", то результат будет по большинству судей считаться.

С другой стороны, если судья постоянно "не видит", то, что видят другие, то без такого рода системы оценить это достаточно сложно. Можно только слышать в коридорах после конкурса. Мне тот судья плохую оценку поставил, а этот - хорошую.

Я не хочу, чтобы система стала "уравнивающей" и заставляла судить "по именам", поэтому самые большие штрафы накладываются на судей, которые не просудили пару финалиста например в 1/32 финала. Согласитесь, такие случаи бывают довольно редко, но о них никто не говорит.
Но если посмотреть глубже, то можно и вопрос судье задать на форуме или при личной встрече (если конечно судья согласится), почему он не провел пару в конкретном случае (предварительно показав видео захода), возможно, он просто не заметил эту пару, так как она в отборочных не танцевала так ярко как в финале (экономила силы).
Мое мнение, что квалифицированный судья сможет ответить достойно, если по его мнению были реальные косяки.
Разброс в крестах был и будет, поэтому расчеты сделаны максимально лояльными и значимые штрафы предусмотрены только за значительные отклонения от итоговых результатов.
PMПисьмо на e-mail пользователюСайт пользователя
Top
Denegin
Дата 1.12.2009 - 15:43
Цитировать сообщение




Мудрец
*********

Профиль
Группа: Администраторы
Сообщений: 11041
Пользователь №: 3
Регистрация: 13.02.2008





Повторюсь, что писал уже везде! Просто эта голая статистика мало что покажет, кроме того, что кто-то из судей не такой как все.
Но вот видит ли он что-то лучше чем все или НЕ видит, это можно будет узнать только на регулярных судейских коллегиях после турниров.

Собственно одно из таких собраний планируется провести по итогам ЧР.


--------------------
PMСайт пользователяICQ
Top

Опции темы Ответ в темуСоздание новой темыСоздание опроса