Выбор предвзят, когда он отклоняется от равномерности, — не потому, что кто-то намеренно кому-то благоволил, а потому, что человеческое суждение где-то вмешалось в процесс.
Это различие важно. Никто в приведённых ниже сценариях не решал быть предвзятым. Предвзятость кроется в способе выбора, и она невидима именно потому, что ощущается как суждение, а не как выбор.
1. Недавность
Что это. Перевес в пользу того, что произошло совсем недавно. Вы выбираете ученика, который вызвался последним; задача, упомянутая пять минут назад, кажется срочной и выполняется.
Как это выглядит. «Кто хочет следующий?» — и вы каждый раз берёте первую поднятую руку. Ученик, поднявший руку тридцать секунд назад, получает больше прав на ваше внимание, чем тот, кто поднял её на первой минуте.
Решение. Проведите жеребьёвку вместо того, чтобы брать первую руку. Здесь нет порядка, который можно использовать.
2. Похож на меня
Что это. Предпочтение людям, которые напоминают вас самих, — те же интересы, тот же стиль общения, то же прошлое.
Как это выглядит. Вы выбираете ученика, чей ответ похож на тот, который дали бы вы. Не нарочно; это воспринимается как «у него был хороший ответ», а не как «он похож на меня».
Решение. Примите результат до жеребьёвки. Выбор сделан, и вы его принимаете — в этом весь смысл. Жеребьёвка, которую вы готовы переиграть, — не выбор.
3. Позиция
Что это. Систематическое предпочтение записей в начале, конце или середине списка.
Как это выглядит. Вы просматриваете список посещаемости и останавливаетесь, найдя подходящего. Верх списка получает больше внимания. На колесе записи в визуально заметных местах кажутся важнее.
Решение. Используйте жеребьёвку с перемешиванием. Если порядок виден и зафиксирован, позиция реально влияет на результат, какими бы ни были ваши намерения.
4. Подтверждение
Что это. Трактовка результатов как доказательства того, во что вы уже верили.
Как это выглядит. Результаты ученика с определённой репутацией читаются как подтверждение, а тот же результат для ученика, о котором вы высокого мнения, — как приятная неожиданность. Жеребьёвка была честной; трактовка — нет.
Решение. Запишите причину решения до того, как его примете. Если вы не можете сформулировать почему до того, как увидели результат, значит, решение принималось не на этих основаниях.
5. Доступность
Что это. Отождествление тех, кто присутствует, с теми, кто должен участвовать.
Как это выглядит. Двое учеников отсутствуют; жеребьёвка их включает; вы пропускаете их, когда они выпадают. Теперь пул не совпадает с опубликованным, и отклонение не случайно.
Решение. Уберите отсутствующих участников до жеребьёвки и сообщите об этом. Если число оставшихся имён опубликовано, результат можно защитить.
6. Инерция
Что это. Отношение к закономерности как к механизму. Пропустить кого-то, потому что его часто выбирали в последнее время, — законный инстинкт справедливости, но он даёт результат, который не случаен.
Как это выглядит. «У них было три хода, оставлю их». Следующая жеребьёвка снова их включает, и компенсация сдвинула распределение без чьего-либо решения.
Решение. Если важен баланс за период, нужна ротация, а не жеребьёвка с ручными правками. Это два разных процесса, и их смешение не даёт ни того, ни другого.
Основная проблема
У большинства из них одна причина: выбирающий хочет выглядеть так, будто выбрал хорошо, и не терпит результата, который выглядит плохо. Предвзятость не в предпочтении хорошего исхода — это нормально, — а в готовности нарушить процедуру ради него.
Поэтому публичная жеребьёвка работает лучше частной, даже когда механизм одинаков. Жеребьёвку, которую видит кто-то ещё, сложнее переиграть, а ту, за которой наблюдали, не станешь тихо менять задним числом.
Ещё поэтому внешний инструмент не становится автоматически беспристрастным. Инструмент применяет одни и те же вероятности, но человек за ним всё равно может перезапустить, переупорядочить или пропустить. Честность механизма и честность процесса — разные свойства, и только второе предотвращает спор.
Что действительно это предотвращает
Жеребьёвка по опубликованному списку. Запишите его, покажите и не меняйте после результата.
Пусть жеребьёвку проведёт кто-то другой. Самая сильная из доступных мер. Ученик с устройством в руках или член команды — свидетель, которого потом нельзя заподозрить в чьей-то поддержке.
Запишите это. Скриншот, где список и результат видны вместе, заранее закрывает вопрос. Это стоит делать для любой жеребьёвки, которая будет иметь значение.
Не перезапускайте, если правило не разрешало. Повторный бросок после разочаровывающего результата — самый ясный сигнал, что процесс на самом деле не случаен, и это ошибка, которую заметят с наибольшей вероятностью.
Не исправляйте вручную. Убрать отсутствующее имя задним числом, пропустить неудобную запись или компенсировать прошлый запуск — всё это одна и та же ошибка в разных обличьях.
Замечание о честности
Стоит уточнить одну вещь: случайный выбор даёт всем равный шанс, а это не то же самое, что равные результаты. В классе из тридцати учеников за период не каждого выберут одинаково часто, и кто-то это заметит.
Равномерность — не то же самое, что баланс. Если требуется баланс, а не беспристрастность, правильный инструмент — ротация, и жеребьёвка её не заменит: даже хорошо проведённая жеребьёвка не даст того, что даёт ротация.
Страница честности разбирает механизм, в том числе почему Math.random() не подходит и что исправляет выборочное отклонение. Это стоит знать, если вы выбираете инструмент для решения, которое будут оспаривать.
Коротко
Каждая предвзятость выше исходит из одного: нежелания принять результат, который вы не выбирали.
Поэтому полезная практика — не «быть менее предвзятым», а принять решение до того, как вам захочется, на глазах у людей, по уже опубликованному списку. Предвзятостям становится негде действовать.
И если вы ловите себя на том, что перезапускаете жеребьёвку, ответ у вас есть. Остановитесь, примите результат и идите дальше.