|
|||||
Понятийный аппарат при разработке и использовании тестов.Дата добавления: 2014-10-24 | Просмотров: 1753
Необходимость создания четкого понятийного аппарата для разработки тестов не всегда понятна преподавателям-практикам. Отчасти это объясняется кажущейся простотой самих понятий, так как нередко любой набор заданий в тестовой форме в представлении учителя ассоциируется с тестом. Такие псевдотесты сплошь и рядом публикуются в специальных сборниках. Их можно использовать в текущем контроле, но не в работе аттестационных центров. Несоответствие псевдотестов научно обоснованным критериям качества может привести к значительному ошибочному компоненту в оценках подготовленности учащихся, следствием которого будут неправильные выводы относительно эффективности работы отдельных преподавателей или педагогических коллективов. Таким образом, понятийный аппарат необходим, поскольку он служит целям отделения тестов от того, что нередко за них принимается. Предтестовое задание.Определение предтестового задания является базовым, содержащим специфические требования, с тем чтобы отличить его от традиционного контрольного задания. Предтестовое задание — это единица контрольного материала, содержание, логическая структура и форма представления которого удовлетворяют ряду требований и обеспечивают однозначность оценок результатов выполнения благодаря стандартизованным правилам проверки [60]. В предтестовых заданиях проверяются наиболее существенные опорные элементы содержания дисциплины. В каждом предтесто-вом задании определяется то, что однозначно считается правильным ответом с запланированной степенью его полноты. Требования, предъявляемые к форме предтестовых заданий, можно условно разделить на специальные, отражающие специфику формы, и общие, инвариантные относительно выбранной формы. Согласно общим требованиям задание должно иметь определенный порядковый номер, стандартную инструкции по выполнению, адекватную форме, эталон правильного ответа, стандартизованные правила по оценке результатов его выполнения и т.д. (см. гл. 7). Специальные требования к форме довольно многочисленны, частично они представлены в главе 7, посвященной формам предтестовых заданий. Преимущества предтестовых заданий по сравнению с традиционными контрольными заданиями обеспечиваются предельной стандартизацией при предъявлении и оценивании результатов их выполнения, что в целом повышает объективность оценок учащихся по тесту. Тестовое задание.Предтестовые задания должны пройти обязательную эмпирическую проверку, по результатам которой часть из них превращается в тестовые, а оставшаяся часть удаляется из первоначальной совокупности заданий теста. Предтестовое задание превращается в тестовое, если количественные оценки его характеристик удовлетворяют определенным критериям, нацеленным на эмпирическую проверку качества содержания, формы и системообразующих свойств предтестовых заданий. Обычно требуется не менее двух-трех апробаций, по результатам которых ведется коррекция содержания, формы, трудности задания, его валидности и статистических свойств, характеризующих качество его работы вместе с остальными заданиями теста. Исследование системообразующих характеристик тестового задания проводится на основе анализа дескриптивной (описательной) статистики, а также методов корреляционного, факторного и латентно-структурного анализа. Интерпретация результатов анализа — это всегда сложная аналитическая работа, результаты которой зависят от множества условий, в том числе и от вида создаваемого теста. Статистические характеристики тестовых заданий и требования к их качеству рассмотрены в главе 9. В длительной апробации и коррекции нуждаются в основном итоговые тесты, используемые для принятия управленческих решений в образовании. Например, при разработке учительских тестов для текущего контроля корреляционный и факторный анализ не нужны, но дескриптивная статистика, позволяющая без особых усилий отобрать валидные задания приемлемой трудности, будет также очень полезна. Педагогический тест. Вотличие от первых двух определений, инвариантных относительно целей тестирования и решаемых задач, определение педагогического теста должно быть ориентировано на конкретный вид теста. В частности итоговый нормативно-ориентированный тест — это система тестовых заданий, упорядоченных в рамках определенной стратегии предъявления и обладающих такими характеристиками, которые обеспечивают высокую дифференциацию, точность и обоснованность оценок качества учебных достижений. Из этого определения следуют два важных вывода. Первый: нет и не может быть тестов качественных вообще, так как оценка дифференцирующего эффекта теста, точности измерений (надеж- ности) и их адекватности поставленным целям (валидности) зависит не только от характеристик тестовых заданий, но и от особенностей тестируемого контингента учащихся. Второй: для оценки качества теста необходимы эмпирические данные тестирования, полученные на репрезентативной выборке учащихся. Работа по коррекции теста консолидирует систему тестовых заданий — постепенно нарастают внутренняя связь и целостность, интегра-тивность системы, совершается переход от совокупности предте-стовых заданий к профессионально разработанному тесту. Итоговый критериально-ориентированный тест — это система тестовых заданий, упорядоченных в рамках определенной стратегии предъявления и обладающих такими характеристиками, которые обеспечивают валидную содержательную интерпретацию учебных достижений по отношению к установленным, статистически обоснованным критериям выполнения [1; 48]. В определении не конкретизируется базовая содержательная область, используемая при интерпретации, что позволяет применять его для различных разновидностей критериально-ориентированных тестов. Практические задания и вопросы для обсуждения 1.Каковы функции входного тестирования? Есть ли смысл разраба 2. Каковы цели разработки корректирующих тестов? Есть ли различия 3. В рамках какого подхода, по вашему мнению, следует разрабаты 4. Какой процесс называется стандартизацией теста? Перечислите основные факторы, влияющие на устойчивость норм теста в вашей школе. 5. Каковы отличия нормативно-ориентированных тестов от критериально-ориентированных? 6. Сформулируйте определения предтестового задания, тестового задания, педагогического теста. Сравните свой ответ с содержанием соответствующих разделов пособия. 7. Родители Миши хотят обсудить с вами его возможности для поступления по результатам ЕГЭ в университет, в котором вы работаете. Какой подход к интерпретации результатов Миши по ЕГЭ вы будете использовать? Почему? 8. Между директором школы, который вызвал к себе учителя, и учителем состоялся диалог следующего содержания. Директор. Вы являетесь классным руководителем 6-го «А» класса с углубленным изучением математики. К нам из другой довольно слабой школы нашего района переводят ученика, который по математике имеет одно из первых мест в своем классе. Вот результаты тестов по математике, которые этот ученик выполнил лучше, чем 90 % учащихся его класса. Как вы думаете, он будет у вас хорошо учиться или лучше определить его в другой, нематематический класс? Учитель. Я не уверена в том, что новый ученик сможет учиться в нашем классе. Вы могли бы дать мне подробную содержательную расшифровку результатов его тестирования? Какие знания и умения он получил, на каком уровне он освоил разделы программы? Директор. Что вы имеете в виду? Я же сказал, что он отлично выполнил тест по математике. Учитель. Я хотела узнать совсем другое. Мне бы хотелось понять, что он усвоил и чего он не знает. Директор (раздражительно). Разве вы не умеете интерпретировать результаты тестирования? Возможно, вам следует пройти повышение квалификации по тестированию и оценке знаний учащихся. Учитель (расстроенно). Я только что прошла курс обучения тестированию и хорошо понимаю, что означают данные, которые вы мне показываете. Я хочу знать, что посоветовать ему, чтобы он не стал получать в нашем классе «двойки». Очевидно, что между директором и классным руководителем класса с углубленным изучением математики отсутствует взаимопонимание. Директор предоставил учителю результаты учащегося, но они, похоже, педагогу не нужны. Почему? В чем проблема? Какие результаты тестирования и какие тесты нужны, чтобы помочь новому ученику освоиться в классе? Что было бы, если аналогичный вопрос о способностях ученика задали родителям мальчика? Нуждается ли классный руководитель математического класса в дополнительном обучении тестированию или учить следует директора?
. Таблица 2 Требования к внешней деятельности учащегося Уровень Требования к достижениям усвоения учащихся (уровню подго- Формулировки требований учебного товки учащихся) в обобщен- в терминах внешней деятельности материала ных терминах Воспроиз- Знать терминологию, спе- Давать определение; называть; Понимание Понимать факты, законы, Объяснять; соотносить; харак- ние знаний теории; понимать прочи- ристики); сравнивать; устана- (предложение); вставлять пропу Окончание табл. 2 Уровень Требования к достижениям усвоения учащихся (уровню подго- Формулировки требований учебного товки учащихся) в обобщен- в терминах внешней деятельности материала ных терминах высказывать суждения о качестве (точности, эффективности, экономичности) проделанной работы, о выбранном способе решения или используемых методах; выстраивать модель (изменять модель); реконструировать, составлять план эксперимента, рассказа, решения; изменять план и т.д. Таблица 4 Достоинства и недостатки различных форм предтестовых заданий Форма предтес- I Достоинства Т Недостатки Задания с дву- Благодаря краткости поз- Стимулируют механиче- мя ответами воляют охватить большой ское запоминание, по- объем материала, легко ощряют угадывание, тре- разрабатываются (только буют увеличения количе- один дистрактор), резуль- ства заданий и, соответ- таты выполнения обраба- ственно, времени тести- тываются быстро с высо- рования для компенса- кой объективностью ции эффекта угадывания Задания с вы- Годятся для самых раз- Требуют значительной Задания с кон- Просты в разработке, ис- Проверяют в основном Окончание табл. 4 Форма предтес- п ., ; „ Достоинства Недостатки товых задании " приводят к неоднозначным правильным и частично правильным ответам ------------------------------------------------------------- _----------------------------------------- Задания со сво- Позволяют оценивать Требуют длительной до- Задания на Просты в разработке, В основном используются ГЛАВА 12 |
При использовании материала ссылка на сайт Конспекта.Нет обязательна! (0.048 сек.) |