На ЕГЭ, к роботу, да с смартфоном в руках [Виктор Орт Ort] (fb2) читать постранично, страница - 3
[Настройки текста] [Cбросить фильтры]
Вопросы (задачи) для тестирования. Составление вопросов и ответов к ним, есть самый сложный момент в работе АСТ. Для начала, за основу можно взять вопросы обычного ЕГЭ по предмету, дополнив их в режиме вики-краудсейла от учителей школ, ВУЗов и студентов. Затем, в Обрнадзоре, отобрать лучшие и сформировать несколько сотен исходных (канонических) вопросов (математика) и правильные ответы к ним, разложив все по группам сложности. И выложить их в открытый доступ, на сайты Минобра и Обрнадзора, в начале января текущего года. Причем, в течении года эти многочисленные канонические вопросы по группам сложности (баллам) не должны изменяться. И пусть старшеклассники многие месяцы, на них оттачивают свое мастерство и знания. А почувствовав уверенность, посылают электронную заявку и идут в ГорТЦ сдавать тестирование по предмету или платят и пересдают его, для получения более высоких баллов. Значительно сложнее сделать автоматизированное преобразование этих канонических вопросов в реальные тестовые. Чтобы на экран тестируемого в ГорТЦ, каждый раз выдавались несколько модернизированные вопросы. Иначе будет простое списывание, по выборке - «вопрос – ответ» с использованием компов и смартфонов. Что и наблюдается сейчас во многих, тупо сделанных системах тестирований. Самое простое – посадить несколько «преподов» на модернизацию этих канонических вопросов и пусть они выдают по тысяче новых вопросов в неделю-месяц. Тогда ни один «хакер/помощник/решала» не угонится, даже если эти вопросы и украдут с сервера. И база (БД) таких реальных вопросов к концу года будет огромной, за десятки тысяч по каждому из предметов. Тогда «серверной рулетке» будет из чего выбирать и у соседей в ГорТЦ вопросы практически никогда не совпадут. И подсказок от соседних столов не будет, из-за ограничений по времени на тестирование. Но обязательно появится «дорогой запрос» на увод этих вопросов с сервера Обрнадзора, с последующей продажей их. Что может сильно дискредитировать АСТ. Живем-то в реальном мире страстей и коррупции, не стоит наивничать. Потому, самое слабое звено – человек-модификатор, приемлем лишь на первые год-два создания АСТ. Далее модернизацию канонических вопросов в тестовые вопросы надо производить в реальном времени. Т.е. для каждого тестируемого подготавливать свои тестовые вопросы, как только он пришел в ГорТЦ (лимит =10-30 минут) и пересылать шифрованный тестовый набор из центра в локальный ТЦ. И здесь без привлечения систем искусственного интеллекта (ИИ) и быстро обучаемых нейросетей трудно обойтись. На первых этапах, можно совместить «человека и машину», на самых простых вопросах. Пусть эти низкобальные вопросы, которых много и ответы к ним легки, готовит «софтовый робот», а модификацию сложных, высокобальных вопросов пока оставить за человеком, в виде отдельной базы данных (БД), созданной людьми. Для простых вопросов (допустим, по математики), можно составить БД основных терминов и логических связей между ними. Плюс все это связать с БД формул и набором алгоритмов. Тогда такая «нейро-софтина» при каждом запуске будет формулировать из канонического вопроса новый тестовый вопрос, формировать алгоритм решения и вычислять правильный и выдавать набор неверных ответов. В вопросах по математике, где, обычно, используют жесткую логику и четкие формулировки, возможно применение и простых авто-семантических преобразований. Например, возьмем канонический тип вопроса: «Определить площадь круга радиусом 1 м»? Вот как может выглядеть преобразованный вопрос: «На клумбе диаметром 10 м., цветы. Каждый занимает 0,3 кв.м. Сколько целых цветков на клумбе?» И соответствующий набор ответов. А в следующем запуске этот канонический вопрос может преобразоваться в такой: «Круглую медаль площадью 25 кв. см поместили в квадратную рамку. Чему равна сторона минимальной рамки?» И свой набор ответов. Алгоритмы можно совместить и на каждый канонический вопрос программный автомат будет выдавать один, из нескольких десятков уже преобразованных вопросов, из текущей недели. В вопросах может фигурировать то прямая задача, то обратная. То про квадраты, то про прямоугольники или круглые предметы и т.п. Причем такое семантическое преобразование можно применить к очень многим вопросам и не только по курсу математики. Главное, чтобы тексты реальных вопросов (задач), по любому предмету тестирования, должны явно отличаться от канонических и
Последние комментарии
15 часов 29 минут назад
1 день 1 час назад
1 день 14 часов назад
1 день 21 часов назад
1 день 22 часов назад
1 день 23 часов назад