Более 1000 ответов на анекдот с пропуском... :)

В шуточном тесте "Анекдодыр" надо было заполнить пропуск в анекдоте. По этому тесту накопилось за несколько лет более 1000 ответов в нашем "Клубе Испытателей Тестовых Технологий" (КИТТ). Даю сам анекдот с пропуском, а в главном комментарии (главкоме) привожу самые частотные варианты ответов.



"Отец - сыну.
- Когда Авpаам Линкольн был в твоем возpасте, он каждый день ходил по 19 километров пешком в школу!
- Папа, когда Авpаам Линкольн был в твоем возpасте, он был ______"


Наша система HT-LINE автоматически выстраивает ответы по частотности. Привожу ниже самые частотные и самые забавные ошибочные ответы таковы (привожу не все, но из множества опечаток на тему правильного ответа каждому читателю легко понять, каков бы авторский правильный ответ-ключ в этом тестовом задании с пропуском):

мертв ×48
президент ×17
миллионером ×6
инвалидом ×5
убит ×4
мертвым ×4
трупом ×3
богатым ×3
президентомм ×1
презеднтом ×1
призидентом ×2
ребенком ×2
пенсионером ×1
был мертв ×1
президтом ×1
резидентом ×1
призедентом ×2
охотником на вампиров ×1
хромой ×1
умер ×1
без машины ×1
покойник ×1
труп ×1
королем ×1
парализован ×1
ппрезидентом ×1
гением ×1
ходячий ×1
богат ×1
хромым на обе ноги ×1
мертвый ×1
мертвым. ×1

Кстати, вполне допускаю, что кто-то из наших участников группы посчитает самый частотный ответ "мертв" не менее остроумным, чем правильный ответ

МОРАЛЬ СЕЙ БАСНИ? - А она такова, что тесты с пропуском автоматически измеряют заодно с остроумием в данном случае еще и банальную грамотность. ибо невозможно (и вряд ли правильно) засчитывать как правильный такой ответ, который написан респондентом с грубой ошибкой. А Вы как считаете?

Кстати, еще забавная деталь. Некоторые участники "благополучно" путают Авраама Линкольна с Франклином Рузвельтом, который был парализован и, как мы знаем, последние годы правил Америкой в инвалидной коляске.

P.S.

Стоит пояснить, что КД для этого задания оказался вполне нормальным и значимым 0,31, а удельный вес ошибочных ответов в этом задании вообще-то оказался небольшим - только 19 процентов. Подавляющее большинство участников клуба КИТТ выбрали один из трех правильных ответов: "президентом", "президентом страны", "президентом США". Но... есть вопроса, а считать ли правильным ответ, который не согласован в падеже - "президент"? А Вы как считаете?

Коллеги,

А вот пример задания с более высоким КД (коэффициентом дискриминативости) 0,6

Бизнесмен бизнесмену:
- Вы называете свою цену. Я называю свою цену. Потом мы оба ______ и приступаем к серьезному разговору.

Правильные ответы дает большинство участников и они такие:

*хохочем
*посмеемся
*похохочем
*смеемся


Покажем здесь статистику ошибочных ответов, а ниже дадим небольшой анализ этой статистики:

выпиваем ×60
пьем ×19
соглашаемся ×11
думаем ×10
ржем ×9
напиваемся ×9
улыбаемся ×8
торгуемся ×7
выпьем ×6
ругаемся ×4
деремся ×4
бухаем ×3
скидываем ×3
замолкаем ×3
забываем ×2
затыкаемся ×2
плачем ×2
обмениваемся ×2
обдумываем ×1
ссоримся ×1
курим ×1
меняемся ×1
подписываем ×1
спускаемся на землю ×1
ржом ×1
материмся ×7
садимся ×2
их складываем ×1
успокаиваемся ×4
сравниваем ×5
возмущаемся ×2
называем ×5
заканчиваем смеяться ×1
платим ×4
не соглашаемся ×2
выходим ×1
удивляемся ×2
делаем скидку ×1
отказываемся ×6
стреляемся ×2
офигеваем ×2
фигеем ×2
уступаем ×2
спорим ×2
вскрываемся ×2
от души смеемся ×1
хлопнем ×1
расходимся ×1
пишем ×1
закатываем губу ×1
закуриваем ×1
ложимся ×1
миримся ×1
расплачиваемся ×1
трахаемся ×1
складываем ×1
умолкаем ×1
называем свою цену ×1
переспим ×1
забываем свои цены ×1
соглашаемся на мою ×1
пожимаем руки ×1
считаем ×1
прекращаем выебываться ×1
встречаемся ×1
скидываемся ×1
сравним ×1
прицениваемся ×1
договариваемся ×1
несогласны ×1
выпили ×1
смотрим ×1
идем ×2
извиняемся ×1
отмечаем ×1
успокаиваимся ×1
обедаем ×1
прибавляем ×1
принимаем мои условия ×1
обесцениваемся ×2
.. ×1
обсуждаем ×1
вырьем кофе ×1
выбрасываем их ×1
пропускаем по 100 грамм ×1
успокоились ×1
охрениваем ×1

Как видим, в свободных ответах проявляется весьма разнообразная тематика, но нередко явно "проективная". Тут проявляется и сексуальная озабоченность ("трахаемся", "переспим") и приверженность матершине и даже увлечение карточными играми ("вскрываемся"). Но главная тема в ошибках - это алкогольная направленность ("выпиваем", "пьем", "напиваемся", "выпьем", "бухаем" и т.п.). Впрочем, оставим в стороне рафинированный анализ ошибок - в пользу любителей проективных техник.

Для нас важно понять, как далеко мы должны расширить множество правильных ответов? - Вот методическая проблема номер раз! Можно ли считать правильным ответ, сниженный по уровню литературной стилистики в пользу грубой бытовой лексики ("ржем"), тем более сомнительно считать правильным такой же ответ, но с грамматическом ошибкой ("ржом")? А что делать с "улыбаемся" (кстати, весьма частотная ошибка)? И с таким совсем уж редкими, единичными правильными ответами: "заканчиваем смеяться", "от души смеемся"?

Мой ответ таков (хотя Вы можете с ним не соглашаться): ТЕСТ - это приблизительная массовая технология, ориентированная на работу с БОЛЬШИНСТВОМ, а не с отдельными случаями. Тест все равно содержит в себе погрешности, связанные с тем, что кто-то особым образом понимает и инструкцию, и свою задачу при выполнении, и смысл отдельных заданий (вопросов), и смысл ответов. Поэтому... надо ИГНОРИРОВАТЬ ВСЕ ЭТИ СОМНИТЕЛЬНЫЕ СЛУЧАИ, а учитывать только самые частотные случаи. А все, что менее 1 процента (в данном случае менее 10 наблюдений из 1000) - это все считать "мусором" (или более корректно на языке теории информации - "информационным шумом").