Коллектив авторов - Корпоративное обучение для цифрового мира

Типы вопросов:

• с выбором одного правильного варианта ответа;

• с выбором нескольких правильных вариантов ответа;

• на соответствие/упорядочивание;

• с вводом текстового ответа (где ответ – это число, слово, недвусмысленная фраза (словосочетание), возможные для автоматической проверки).

Вариабельность ответов тестов:

• для автоматической проверки ответов на тесты каждый вопрос должен иметь по крайней мере один вариант правильного ответа;

• правильных ответов в вопросе может быть более одного;

• все варианты ответа также могут быть правильными.

Уровни сложности

Вопросы в банке вопросов ранжируются по единым для всех тем уровням сложности. Количество уровней – не менее 3, оптимально – от 5 до 10. Наличие большого числа уровней сложности (например, 10) более требовательно к калибровке сложности на выборочной группе слушателей, но и обеспечивает более высокую точность итоговой оценки уровня знаний.

Внутри каждой темы (тематического блока) рекомендуется иметь вопросы разного уровня сложности, так как это прямо влияет на вариативность теста и адаптивные возможности технологии.

Внутри каждой темы лучше распределить вопросы группами – не менее трех вопросов на каждом уровне. Чем больше вопросов на одном уровне сложности, тем больше вариативность теста, что важно для повторного прохождения или тестирования людей, которые могут помогать друг другу.

Варианты распределения вопросов

• Равномерное распределение –не менее 10 вопросов каждого уровня сложности.

• «Пирамида» – коррекция количества вопросов в форме «пирамиды», когда более сложных вопросов несколько меньше, чем простых (так как до сложных доходят гораздо реже). В этом случае рекомендуется следующее соотношение: не менее 6 вопросов высших уровней сложности, не менее 8 вопросов средних уровней сложности и не менее 10 вопросов низших уровней сложности.

• Автоматическое распределение по уровням сложности.Для этого проводится первичное тестирование (на выборке участников). Степень сложности вопросов определяется в соответствии с ответами участников. Вопросы, набравшие большинство правильных ответов, считаются самыми простыми, а вопросы с наименьшим числом правильных ответов – самыми сложными.

Траектории тестирования

Траектории тестирования позволяют определить наиболее вероятные пути прохождения тестирования в разных контекстах. Например, в контексте перехода между уровнями сложности они помогают определить вопросы, в наибольшей степени влияющие на процесс тестирования (тестируемые «скорее справятся» на шаге N с вопросом уровня сложности X или, наоборот, испытают трудности с вопросом этого уровня сложности).

Данные результаты полезны для улучшения качества материалов и при построении индивидуальной траектории обучения Конец ознакомительного фрагмента. Текст предоставлен ООО «ЛитРес». Прочитайте эту книгу целиком, купив полную легальную версию на ЛитРес. Безопасно оплатить книгу можно банковской картой Visa, MasterCard, Maestro, со счета мобильного телефона, с платежного терминала, в салоне МТС или Связной, через PayPal, WebMoney, Яндекс.Деньги, QIWI Кошелек, бонусными картами или другим удобным Вам способом. . Учебную программу можно персонализировать для каждой группы слушателей на основе тех пробелов в знаниях, которые были обнаружены в ходе тестирования. Слушатели могут непосредственно в процессе тестирования провести самопроверку и восполнить выявленные пробелы (постепенно – от простого к сложному).

Коррекция адаптивного теста на основании аналитики

Частотный анализ результатовпозволяет внести корректировку в распределение вопросов по уровням сложности в сбалансированной модели на основе анализа распределения ответов участников (определить аномально сложные или простые вопросы на разных уровнях сложности и получить рекомендацию, в какой уровень сложности стоит перенести данные вопросы). Прогноз результатов обучения проводится исходя из количества попыток пройти тест и среднего результата, достигнутого за время всех попыток.

• Qualtrics