На ЕГЭ, к роботу, да с смартфоном в руках - [3]
Значительно сложнее сделать автоматизированное преобразование этих канонических вопросов в реальные тестовые. Чтобы на экран тестируемого в ГорТЦ, каждый раз выдавались несколько модернизированные вопросы. Иначе будет простое списывание, по выборке - «вопрос – ответ» с использованием компов и смартфонов. Что и наблюдается сейчас во многих, тупо сделанных системах тестирований.
Самое простое – посадить несколько «преподов» на модернизацию этих канонических вопросов и пусть они выдают по тысяче новых вопросов в неделю-месяц. Тогда ни один «хакер/помощник/решала» не угонится, даже если эти вопросы и украдут с сервера. И база (БД) таких реальных вопросов к концу года будет огромной, за десятки тысяч по каждому из предметов. Тогда «серверной рулетке» будет из чего выбирать и у соседей в ГорТЦ вопросы практически никогда не совпадут. И подсказок от соседних столов не будет, из-за ограничений по времени на тестирование. Но обязательно появится «дорогой запрос» на увод этих вопросов с сервера Обрнадзора, с последующей продажей их. Что может сильно дискредитировать АСТ. Живем-то в реальном мире страстей и коррупции, не стоит наивничать.
Потому, самое слабое звено – человек-модификатор, приемлем лишь на первые год-два создания АСТ. Далее модернизацию канонических вопросов в тестовые вопросы надо производить в реальном времени. Т.е. для каждого тестируемого подготавливать свои тестовые вопросы, как только он пришел в ГорТЦ (лимит =10-30 минут) и пересылать шифрованный тестовый набор из центра в локальный ТЦ. И здесь без привлечения систем искусственного интеллекта (ИИ) и быстро обучаемых нейросетей трудно обойтись.
На первых этапах, можно совместить «человека и машину», на самых простых вопросах. Пусть эти низкобальные вопросы, которых много и ответы к ним легки, готовит «софтовый робот», а модификацию сложных, высокобальных вопросов пока оставить за человеком, в виде отдельной базы данных (БД), созданной людьми.
Для простых вопросов (допустим, по математики), можно составить БД основных терминов и логических связей между ними. Плюс все это связать с БД формул и набором алгоритмов. Тогда такая «нейро-софтина» при каждом запуске будет формулировать из канонического вопроса новый тестовый вопрос, формировать алгоритм решения и вычислять правильный и выдавать набор неверных ответов.
В вопросах по математике, где, обычно, используют жесткую логику и четкие формулировки, возможно применение и простых авто-семантических преобразований. Например, возьмем канонический тип вопроса: «Определить площадь круга радиусом 1 м»? Вот как может выглядеть преобразованный вопрос: «На клумбе диаметром 10 м., цветы. Каждый занимает 0,3 кв.м. Сколько целых цветков на клумбе?» И соответствующий набор ответов. А в следующем запуске этот канонический вопрос может преобразоваться в такой: «Круглую медаль площадью 25 кв. см поместили в квадратную рамку. Чему равна сторона минимальной рамки?» И свой набор ответов.
Алгоритмы можно совместить и на каждый канонический вопрос программный автомат будет выдавать один, из нескольких десятков уже преобразованных вопросов, из текущей недели. В вопросах может фигурировать то прямая задача, то обратная. То про квадраты, то про прямоугольники или круглые предметы и т.п. Причем такое семантическое преобразование можно применить к очень многим вопросам и не только по курсу математики.
Главное, чтобы тексты реальных вопросов (задач), по любому предмету тестирования, должны явно отличаться от канонических и постоянно изменяться.
Вот, как это может выглядеть на детском простом примере.
Канонический текст вопроса и ответов:
«А и Б сидели на трубе, А упало, Б пропало, кто остался на трубе?»
Ответы: А, б, в,г,д,и,к,л,м,н, никто. Правильный ответ «и».
А реально, на экране, появится семантически преобразованный вопрос, но логически тождественный каноническому.
Допустим такой: «Ё и Е лежали на скамье, Ё скатилось, Е разбилось, что мы видим на скамье?» И ответы: Ё, е, и, п, р, с, т, ничего. Вот и ломай голову, как найти подсказку, хотя канонический набор вопросов и ответов открыт у тебя в компе. А при другом запуске теста этот преобразованный вопрос, может выглядеть так: «В траве лежали V и Q. V смылась, всем сказав «ку-ку», а Q слова не разобрав, вскочила много выше трав. Что завалялось в траве? И соответствующий набор ответов, на этот почти автоматический «реп».
Возможны и другие алгоритмические решения модификации вопросов из канонических в тестовые.
