http://knop.livejournal.com/ ([identity profile] knop.livejournal.com) wrote in [community profile] ru_chgk2010-12-23 01:40 am

Тестирование и защита от утечек

При подготовке этого ОКРа я достаточно жестко сформулировал редакторской группе ограничение на тестпрование - каждый из индивидуальных тестеров, получивших вопросы электронной почтой, должен увидеть не более 50% всего пакета.

Большое спасибо ребятам за то, что они с честью выполнили это условие. Да, им в результате было тяжелее. Да, возможно (хотя и не факт), что разрешение на привлечение каждого из тех же тестеров к 100% пакета позволило бы сделать ОКР лучше. Я не собираюсь лезть в бутылку и утверждать, что этого не могло бы случиться.

Я хочу обратить общее внимание на то, ради чего это было сделано. Речь идет прежде всего о защите репутации команд и тестеров. Чтобы не могла возникнуть (повториться) очень неприятная во всех смыслах ситуация "твой друг тестировал пакет, а ты на нем удачно сыграл - поэтому я считаю, что вы с другом жулики". В ситуации 50% тестирования обвинение в жульничестве почти наверняка будет отбито простой арифметикой: берем те 50%, которые видел данный тестер, и сравниваем результат данной команды на этих вопросах с ее же результатом на остальных. Если большой разницы нет - то какие могут быть претензии? (А если разница действительно неправдоподобно велика - то это уже повод привлечь дисциплинарную комиссию, и пусть она разбирается...)

Сразу же хочу отметить, что я вовсе не пытаюсь обвинить кого-либо в "преднамеренных сливах" даже чисто теоретически. Надо осознавать, что в нашем мире существуют возможности утащить письмо из чужого почтового ящика так, что ни его владелец, ни автор письма этого даже и не смогут заметить. Более того, поскольку в качестве тестеров часто привлекаются одни и те же люди, то их ящики находятся под большей угрозой, чем остальные. И это еще одна причина, по которой не хочется отсылать людям весь пакет целиком: даже если взломщик узнает заранее половину ответов, он будет очень остерегаться пользоваться этим знанием. Поскольку чтобы не привлечь к себе внимание, на второй половине придется _честно_ показывать сравнимый результат.

Если сейчас никто не приведет сверхмощных аргументов, почему такую практику нельзя продолжать в дальнейшем, то на всех последующих синхронах, к которым я имею отношение, а также на взрослом ЧР, это условие для привлекаемых тестеров будет повторено.

[identity profile] e-ponikarov.livejournal.com 2010-12-23 10:47 am (UTC)(link)
Хотя бы потому, что планета круглая - круглая на целых 24 часа :).

[identity profile] zanogu.livejournal.com 2010-12-23 10:58 am (UTC)(link)
но не 72 же =) это во первых.

Получается, что синхрон асинхронен ИСКЛЮЧИТЕЛЬНО из-за Америки?

[identity profile] e-ponikarov.livejournal.com 2010-12-23 11:03 am (UTC)(link)
Нет, разумеется. Америка - просто самый яркий пример.
Думаешь, так просто найти зал для одновременной игры в Германии, Израиле, Санкт-Петербурге, Ростове и Новосибирске?
У нас не стада залов: выбирай - не хочу.

[identity profile] zanogu.livejournal.com 2010-12-23 11:13 am (UTC)(link)
Из тех мест не в России, где нужны огромные залы, я так понимаю только Израиль есть. Поиск зала упирается не в наличие залов, а в средства. Если, действовать, как действовали с кризисным ЧР (тогда, по-моему, вопрос упёрся в сбор лишних 2 тыс. с команды), то, конечно, зала не найти. Не думаю что здесь дело упрётся в 333 р. с человека. Но лишние 50-100 рублей - не деньги.

[identity profile] aka1985.livejournal.com 2010-12-23 07:40 pm (UTC)(link)
Кому как. Для большинства-деньги.

[identity profile] zanogu.livejournal.com 2010-12-23 08:09 pm (UTC)(link)
В Москве?

[identity profile] zanogu.livejournal.com 2010-12-23 11:09 am (UTC)(link)
ну то есть если мы даём старт турнира в 13 по МСК, то на восточном побережье его играют в 8 утра, в Хьюстоне в 7 утра, в Иркутске в 9 вечера и только на западном побережье его придётся играть ночью, но это ночь с субботы на воскресенье, что немаловажно. Из первых 1000 команд рейтинга ночью играют4 команды из Пало-Альто и одна из ЛА. В масштабах ОКР это очень-очень мало. Дальше уже организаторы могут взвесить, что им важнее. По мне, синхроны должны быть синхронными. А зал найдётся.

[identity profile] gimser.livejournal.com 2010-12-23 11:44 am (UTC)(link)
И где это в Москве можно играть в 13 часов?

[identity profile] zanogu.livejournal.com 2010-12-23 12:28 pm (UTC)(link)
в мск. такие проблемы с залом?

[identity profile] soglyadataj.livejournal.com 2010-12-23 01:13 pm (UTC)(link)
Сейчас зал на 80 команд в Мск один.
Питер сможет играть в 5 вечера в субботу?

[identity profile] zanogu.livejournal.com 2010-12-23 01:17 pm (UTC)(link)
Ещё раз... в Москве одно помещение, где помещается 80 команд? Это правда?

Сможет то, может и сможет. Но, на мой вкус, проводить игры в субботу - вообще свинство. Суббота - рабочий (например у учителей, а их немало играет в ЧГК) и учебный день. Если проводить игры в субботу - то начиная с 7.

[identity profile] soglyadataj.livejournal.com 2010-12-23 01:23 pm (UTC)(link)
Бесплатное и хорошее (со столами, светом, звуком, местом, воздухом) - видимо, да. (или не совсем оно бесплатное, но все-таки это другие расценки)
Как я понимаю, каждый раз поиск нового превращается в немалое приключение.
собственно вариантов два - либо это учебные помещения - и тогда мы ограничены субботой, либо конференц-залы - тогда это другие деньги.

[identity profile] zanogu.livejournal.com 2010-12-23 01:30 pm (UTC)(link)
А, бесплатное... ну, вот я и считаю, что если в принудительном поряде сделать синхроны синхронными, то сразу и залы найдутся. Если с 480 знатоков собрать по символической сумме в сто рублей (как доехать от дома до игры и обратно), получится 48 тысяч. На 48 тысяч в Москве нельзя снять приличный зал на 4 часа с утра?

[identity profile] soglyadataj.livejournal.com 2010-12-23 01:35 pm (UTC)(link)
нельзя. Старшие товарищи, больше меня этим занимающиеся, могут меня поправить, но когда я чуть-чуть интересовался, то реальные цены - в пределах 3-4 тысяч баксов.

[identity profile] zanogu.livejournal.com 2010-12-23 01:40 pm (UTC)(link)
мощно, Питеру как-то удаётся играть в съёмном зале и платить сильно меньше.

[identity profile] soglyadataj.livejournal.com 2010-12-23 01:45 pm (UTC)(link)
Москве тоже удается, но ограничение по времени существует.

[identity profile] nikolenko.livejournal.com 2010-12-23 04:41 pm (UTC)(link)
Тут ещё были ключевые слова "с утра". Большинство клубов и ресторанов вообще с утра (тем более с утра воскресенья) простаивают. Хотя я, конечно, понимаю, что столица нашей родины – это очень особенный город. :)

[identity profile] gimser.livejournal.com 2010-12-23 02:17 pm (UTC)(link)
Причём в этом помещении в Москве играют не раньше 5 вечера по внешним причинам.

Платные залы очень дороги и с очень неровным качеством, особенно в том, что касается акустики.

[identity profile] gimser.livejournal.com 2010-12-23 01:27 pm (UTC)(link)
Да, очень солидные.

[identity profile] maksa.livejournal.com 2010-12-23 06:21 pm (UTC)(link)
13 по Москве это 5 утра на восточном помбережье.

[identity profile] zanogu.livejournal.com 2010-12-23 06:31 pm (UTC)(link)
Ох, да... обсчитался... сам вижу. Я ещё писал и думал, что-то мало. Спасибо.

[identity profile] nikolenko.livejournal.com 2010-12-23 06:36 pm (UTC)(link)
Вообще, россиецентричность ЧГК понятна, но это уже чересчур. Можно было бы, правда, делать через два раза на третий наоборот: в Америке в разумное время, а в России в 6-7 утра.

[identity profile] zanogu.livejournal.com 2010-12-23 06:42 pm (UTC)(link)
Ой ли? Чересчур? давай возьмём рейтинг и найдём центр масс ЧГК. Уверен, он будет где-то поюжнее Твери. Да даже если тупо по количеству команд брать... Организационно ЧГК куда менее россиецентрично, чем на самом деле. ЧМ где был последний, кстати, в России?

[identity profile] nikolenko.livejournal.com 2010-12-23 06:46 pm (UTC)(link)
Мне кажется, нельзя мерять количеством. В США 20 команд, но эти 20 команд, мне кажется, гораздо важнее для ЧГК, чем случайно выбранные 200 российских.

На последнем ЧМ все команды начинали в одно и то же дневное время. Да, американцам приходилось акклиматизироваться, но это наименьшее из возможных зол.