Не так давно на очном тренинге в одном из банков из аудитории поступил такой вопрос:
При всем несовершенстве и даже рисках (например, опасность списывания) подобный прием может дать неплохие результаты.
Вообразим, что риск списывания исключен (например, предварительное и итоговое тестирование проходят под контролем и в назначенное время).
О чем может свидетельствовать сравнение результатов?
1. Если итоги контрольного тестирования незначительно выше предварительных (на 5-25%%), то
либо аудитория и без курса была хорошо подготовлена, либо курс "непрактичен".
2. Если результаты претеста равны, несколько или существенно выше контрольного, то
содержание курса и/ или теста (реже) нуждаются в пересмотре.
3. Если показатели итогового теста примерно на 26-49%% и более выше претестирования и при этом средний балл от 66% до 75-80%, качество курса можно считать удовлетворительным.
4. Если показатели итогового тестирования на 50 и более %% выше входного, а средний балл 75% и выше, то
Разумеется, объективность и надежность подобной проверки зависит еще от ряда факторов (прежде всего, качества контента, его объема, простоты/сложности материала, опыта работы учащихся и др.).
Надежность такого приема существенно возрастет, если к нему прибегнуть на этапе опытной эксплуатации курса:
Как просто, быстро и дешево проверить качество электронного курса.
Ответ был примерно таков: дайте контрольный итоговый тест в качестве претеста, а потом сравните результаты с выходным контролем.Вообразим, что риск списывания исключен (например, предварительное и итоговое тестирование проходят под контролем и в назначенное время).
О чем может свидетельствовать сравнение результатов?
1. Если итоги контрольного тестирования незначительно выше предварительных (на 5-25%%), то
либо аудитория и без курса была хорошо подготовлена, либо курс "непрактичен".
2. Если результаты претеста равны, несколько или существенно выше контрольного, то
содержание курса и/ или теста (реже) нуждаются в пересмотре.
3. Если показатели итогового теста примерно на 26-49%% и более выше претестирования и при этом средний балл от 66% до 75-80%, качество курса можно считать удовлетворительным.
4. Если показатели итогового тестирования на 50 и более %% выше входного, а средний балл 75% и выше, то
- либо курс очень качественен,
- либо тест весьма примитивен.
Разумеется, объективность и надежность подобной проверки зависит еще от ряда факторов (прежде всего, качества контента, его объема, простоты/сложности материала, опыта работы учащихся и др.).
Надежность такого приема существенно возрастет, если к нему прибегнуть на этапе опытной эксплуатации курса:
- дать контрольной группе (в ней достаточно иметь 25-30 человек, но лучше 50 и более) выполнить тест (очно или электронно под контролем),
- затем предоставить аудитории возможность в благоприятных условиях изучить курс,
- наконец, провести итоговую контрольную проверку.
Действительно два теста (вначале/в конце) простой способ (проще только один тест – в конце). Но у него есть два существенных «недостатка».
ОтветитьУдалитьВо-первых, составление «правильного» теста - задача не менее сложная, чем разработка курса. И ставить в зависимость качество курса от теста имхо, не очень-то хорошо.
Во-вторых, повторное выполнение теста учит! Существует эффект «натаскивания», который часто используется и в школах и ВУЗах, как наиболее быстрый и простой способ подготовки к тестированию. Приведенные цифры соотношений приведены с учетом этого факта?
С уважением, Колков Сергей