Виктор Орт: На ЕГЭ, к роботу, да с смартфоном в руках

В ГорТЦ лишь Ты, вопросы и «железка-сервер» за тридевять земель, потому «схимичить» невозможно, невзирая на должности, деньги, родственников и прочие «корруп-льготы».

В ГорТЦможно будет быстро, легко и просто тестировать людей на психологическую и наркологическую устойчивость, особенно после серьезных аварий или при получении ежегодных допусков на оружие. Да и при приеме на работу с людьми, а тем более с детьми, желательно постоянно тестировать таких специалистов. Т.е., если подойти с умом, работы у ГорТЦ и у разработчиков АСТ будет очень много.Значит такая система будет развиваться и приносить постоянную прибыль городу и стране!

Вопросы (задачи) для тестирования.

Составление вопросов и ответов к ним, есть самый сложный момент в работе АСТ. Для начала, за основу можно взять вопросы обычного ЕГЭ по предмету, дополнив их в режиме вики-краудсейла от учителей школ, ВУЗов и студентов. Затем, в Обрнадзоре, отобрать лучшие и сформировать несколько сотен исходных (канонических) вопросов (математика) и правильные ответы к ним, разложив все по группам сложности. И выложить их в открытый доступ, на сайты Минобра и Обрнадзора, в начале января текущего года. Причем, в течении года эти многочисленные канонические вопросыпо группам сложности (баллам) не должны изменяться. И пусть старшеклассники многие месяцы, на них оттачивают свое мастерство и знания. А почувствовав уверенность, посылают электронную заявку и идут в ГорТЦ сдавать тестирование по предмету или платят и пересдают его, для получения более высоких баллов.

Значительно сложнее сделать автоматизированное преобразование этих канонических вопросов в реальные тестовые.Чтобы на экран тестируемого в ГорТЦ, каждый раз выдавались несколько модернизированные вопросы. Иначе будет простое списывание, по выборке - «вопрос – ответ» с использованием компов и смартфонов. Что и наблюдается сейчас во многих, тупо сделанных системах тестирований.

Самое простое – посадить несколько «преподов» на модернизацию этих канонических вопросов и пусть они выдают по тысяче новых вопросов в неделю-месяц. Тогда ни один «хакер/помощник/решала» не угонится, даже если эти вопросы и украдут с сервера. И база (БД) таких реальных вопросов к концу года будет огромной, за десятки тысяч по каждому из предметов. Тогда « серверной рулетке» будет из чего выбиратьи у соседей в ГорТЦ вопросы практически никогда не совпадут. И подсказок от соседних столов не будет, из-за ограничений по времени на тестирование. Но обязательно появится «дорогой запрос» на увод этих вопросов с сервера Обрнадзора, с последующей продажей их. Что может сильно дискредитировать АСТ. Живем-то в реальном мире страстей и коррупции, не стоит наивничать.

Потому, самое слабое звено – человек-модификатор, приемлем лишь на первые год-два создания АСТ. Далее модернизацию канонических вопросов в тестовые вопросы надо производить в реальном времени. Т.е. для каждого тестируемого подготавливать свои тестовые вопросы, как только он пришел в ГорТЦ (лимит =10-30 минут) и пересылать шифрованный тестовый набор из центра в локальный ТЦ. И здесь без привлечения систем искусственного интеллекта (ИИ) и быстро обучаемых нейросетей трудно обойтись.

На первых этапах, можно совместить «человека и машину», на самых простых вопросах. Пусть эти низкобальные вопросы, которых много и ответы к ним легки, готовит «софтовый робот», а модификацию сложных, высокобальных вопросов пока оставить за человеком, в виде отдельной базы данных (БД), созданной людьми.

Для простых вопросов (допустим, по математики), можно составить БД основных терминов и логических связей между ними. Плюс все это связать с БД формул и набором алгоритмов. Тогда такая «нейро-софтина» при каждом запуске будет формулировать из канонического вопроса новый тестовый вопрос, формировать алгоритм решения и вычислять правильный и выдавать набор неверных ответов.

В вопросах по математике, где, обычно, используют жесткую логику и четкие формулировки, возможно применение и простых авто-семантических преобразований. Например, возьмем канонический тип вопроса: «Определить площадь круга радиусом 1 м»? Вот как может выглядеть преобразованный вопрос: «На клумбе диаметром 10 м., цветы. Каждый занимает 0,3 кв.м. Сколько целых цветков на клумбе?» И соответствующий набор ответов. А в следующем запуске этот канонический вопрос может преобразоваться в такой: «Круглую медаль площадью 25 кв. см поместили в квадратную рамку. Чему равна сторона минимальной рамки?» И свой набор ответов.