Добрый всем день.
Недавно меня заинтересовал вопрос, и хочу с ним обратиться к тем, кто имеет доступ к логам проверки решений - на скольки процентов тестов обычно хоть кто-то валится? На каждом тесте, на половине, на каких-то трёх?
Недавно меня заинтересовал вопрос, и хочу с ним обратиться к тем, кто имеет доступ к логам проверки решений - на скольки процентов тестов обычно хоть кто-то валится? На каждом тесте, на половине, на каких-то трёх?
Но на КФ изменения как-то очень медленно вносятся, так что вряд ли такую фичу в ближайшее время прикрутят.
Как ни странно, авторы контеста могут про это сказать не больше, чем участники. Никаких умных таблиц/графиков/логов у нас не было.
UPD: Наврал, Паша подсказывает, что есть XML-ный лог. После ТЦ попробую его распарсить.
UPD2: Лог там очень слабоинформативный, поэтому я у организаторов попросил сгенерировать мне из базы данных лог поправильнее.
Напишу скриптик, может поможет в будущем.
А то в руки попал мега-лог файл, не знаю аж, что с ним делать.
А что хотелось изначально - сколько тестов было по задачам подготовлено/на скольки завалился хотя бы один участник.
Мои задачки обычно падают на 2-3 тестах, если они учебные, и в среднем на 2-3 из 20-25 на олимпиадных задачках, но задачи бывают разные. В одной задаче у меня было 20 тестов по 5 баллов каждый и у всех ~12 участников были за нее разные баллы. Случаи, случаи :).
Количество валящих тестов/количество тестов.
problem: 457
19 / 58
problem: 458
15 / 55
problem: 459
16 / 56
problem: 460
18 / 81
problem: 461
5 / 64
Например, задача D:
количество пройденных тестов | количество сабмитов:
0 19
1 4
2 75
3 9
4 1
5-8 0
9 2
10 4
11 1
12 0
13 1
14 4
15 3
16-19 0
20 1
21 1
22 0
23 0
24 1
25 2
26 0
27 0
28 0
29 1
30-76 0
77 2
78 0
79 0
80 41