МИНИСТЕРСТВО ОБРАЗОВАНИЯ И НАУКИ РОССИЙСКОЙ ФЕДЕРАЦИИ
Федеральное государственное бюджетное образовательное учреждение
высшего профессионального образования
«ТОБОЛЬСКАЯ ГОСУДАРСТВЕННАЯ СОЦИАЛЬНОПЕДАГОГИЧЕСКАЯ АКАДЕМИЯ ИМ. Д.И. МЕНДЕЛЕЕВА»
Кафедра математики, теории и методики обучения математике
УМК
УЧЕБНОЙ ДИСЦИПЛИНЫ
«СОВРЕМЕННЫЕ СРЕДСТВА
ОЦЕНИВАНИЯ РЕЗУЛЬТАТОВ ОБУЧЕНИЯ»
Специальность 05020102 65 «Математика»(код и наименование направления подготовки) специализация «Алгебра и геометрия»
Тобольск,
МИНИСТЕРСТВО ОБРАЗОВАНИЯ И НАУКИ РОССИЙСКОЙ ФЕДЕРАЦИИ
Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования«ТОБОЛЬСКАЯ ГОСУДАРСТВЕННАЯ СОЦИАЛЬНОПЕДАГОГИЧЕСКАЯ АКАДЕМИЯ ИМ. Д.И. МЕНДЕЛЕЕВА»
Кафедра математики, теории и методики обучения математикеРАБОЧАЯ ПРОГРАММА
УЧЕБНОЙ ДИСЦИПЛИНЫ
«СОВРЕМЕННЫЕ СРЕДСТВА
ОЦЕНИВАНИЯ РЕЗУЛЬТАТОВ ОБУЧЕНИЯ»
Специальность 05020102 65 «Математика»(код и наименование направления подготовки) специализация «Алгебра и геометрия»
Рабочая учебная программа утверждена на заседании кафедры математики, теории и методики обучения математике ТГСПА им. Д.И. Менделеева Протокол от 10 сентября 2010 г. № 1_ Зав. кафедрой Л.П. Шебанова.
Тобольск
1. ЦЕЛИ И ЗАДАЧИ ОСВОЕНИЯ ДИСЦИПЛИНЫ
Цель дисциплины – познакомить студентов с современными средствами оценки результатов обучения, методическими и теоретическими основами тестового контроля, порядком организации и проведения единого государственного экзамена (ЕГЭ) и государственной (итоговой аттестации) (ГИА).Задачи дисциплины:
– рассмотреть методы конструирования и использования педагогических тестов; методы шкалирования и интерпретации полученных результатов;
компьютерные технологии, используемые в тестировании;
– определить психологические и педагогические аспекты использования тестов для контроля знаний учащихся;
– развить умение составления и оценивания результатов тестовых заданий по своему предмету.
2. МЕСТО ДИСЦИПЛИНЫ В СТРУКТУРЕ ООП ВПО
2.1. Обязательный минимум содержания (стандарт):Всего Индекс Наименование дисциплины и их основные разделы часов ОПД.Ф. Современные средства оценивания результатов обучения Виды, формы и организация контроля качества обучения.
оценка, ее функции.
Развитие системы тестирования в России и за рубежом.
Психолого-педагогические аспекты тестирования. Понятие теста. Виды тестов. Формы тестовых заданий. Компьютерное тестирование и обработка результатов. Интерпретация результатов тестирования. Другие средства оценивания (рейтинг, мониторинг), накопительная оценка («портфолио»).
ЕГЭ, его содержание и организация. Технологическое обеспечение. КИМы.
2.2. Требования к уровню освоения содержания дисциплины Студент должен знать и понимать:
– историю и современное состояние системы тестирования в России и за рубежом;
– традиционные и современные подходы к оценке учебных достижений;
– особенности тестовых технологий, виды и типы тестов, формы тестовых заданий;
– различные методы оценивания результатов тестирования;
– нормативные документы, регламентирующие проведение ЕГЭ;
– структуру и содержание контрольно-измерительных материалов для ЕГЭ по своему предмету;
– процедуру проведения тестирования;
– давать экспертную оценку тестовым заданиям, использовать на практике тесты разных видов;
– проводить тестирование и анализировать полученные данные в рамках классической и современной теории создания тестов;
– составлять тестовые задания различной формы;
методами разработки знаний по подготовке учащихся к ЕГЭ по своему предмету;
навыками работы с компьютерными пакетами программ по обработке результатов тестирования.
3. ОБЪЕМ ДИСЦИПЛИНЫ И ВИДЫ УЧЕБНОЙ РАБОТЫ
1. Изучение учебно-методической и научнометодической литературы (основной и конспектирование).2. Составление заданий в тестовой форме с выбором одного правильного ответа (в соответствии с профилем специальности).
3. Составление заданий в тестовой форме с выбором нескольких правильных ответов (в соответствии с профилем специальности).
4. Составление тестовых заданий в тестовой форме открытой формы (в соответствии с профилем 5. Составление заданий в тестовой форме на установление правильной последовательности и соответствия.
7. Интерпретация результатов выполненных тестовых заданий.
8. Проведение мониторинга успеваемости в своей группе по изучаемой дисциплине.
4. СОДЕРЖАНИЕ ДИСЦИПЛИНЫ
Организация контроля качества Психолого-педагогические аспекты тестирования.ЕГЭ и качество образования.
4.2.1. Лекционный курс Преимущества рейтинговой системы оценивания.
родоначальник тестового движения. Тесты Дж. Кеттела, педагогические и психологические. Первые педагогические тесты Э. Торндайка. Современная теория тестов (IRT). История ее создания.
Развитие тестирования в России. Начало развития тестирования в рамках педологии. Период игнорирования тестов. Использование тестов в 70-е годы XX в. Современные центры тестирования.
Тема «Педагогические тесты. Термины и определения».
Понятийный аппарат тестологии. Понятие теста.
Классификация тестов по разным основаниям.
Зависимость видов и форм тестов от специфики учебной дисциплины.
Тематические тесты, рубежные, итоговая аттестация.
Диагностическое тестирование.
Основные виды педагогических тестов, критериальноориентированный (КОПТ) и нормативно– ориентированный (НОПТ), их сопоставление.
Компьютерное тестирование.
Адаптированное компьютерное тестирование Тема «Основные этапы разработки педагогического теста».
Определение цели тестирования, области содержания, выбор вида теста, подхода к его созданию.
Анализ содержания учебной дисциплины и отбор содержания для теста. Определение структуры теста.
Составление тестовых (предтестовых) заданий.
Экспертный анализ содержания и формы тестовых Разработка и проведение пробного тестирования.
Сбор эмпирических результатов. Статистическая обработка результатов тестирования. Оценка качества тестовых заданий и теста в целом с помощью статистических методов.
Тема «ЕГЭ и качество образования. Организационнотехническое обеспечение ЕГЭ».
ЕГЭ как одно из средств повышения качества общего и педагогического образования. Задачи ЕГЭ.
Преимущества ЕГЭ перед другими формами контроля – достоверность, объективность, надежность полученных результатов.
Тестовые задания. Типы и формы тестовых Раздел 2.
заданий. Требования к заданиям в тестовой Тема «Типы, форме. Составление тестовых заданий. формы и виды Типичные ошибки при составлении тестовых «Типы, формы Работа с программой Конструктор тестов. тестовых Статистическая обработка результатов этапы тестирования. Оценка качества тестовых разработки заданий и теста в целом с помощью педагогическог Обработка результатов тестирования. Раздел 3.
Структура КИМов ЕГЭ: задания типов А,В,С Раздел 3.
Выявление типовых тестовых заданий ЕГЭ по Тема «ЕГЭ и Обобщенные способы выполнения типовых образования.
тестовых заданий. Разработка заданий по Организационн подготовке к ЕГЭ по конкретному предмету. о-техническое 4.2.3. Задания для самостоятельной работы студентов Темы рабочей программы Перечень домашних заданий и Сроки Кол-во Тема «Виды тестов и открытой и закрытой формы 22.01 – 3. формы тестовых различных видов на примере Тема «Определение целей образовательных целей и 5.02-24. тестирования» результаты образования».
формы тестовых конкретной теме и представить ЕГЭ: задания типов А,В,С и Решить один из вариантов ГИА централизованного и ЕГЭ.
тестирования».
4.2.4. Лабораторный практикум не предусмотрен
5 УЧЕБНО-МЕТОДИЧЕСКОЕ ОБЕСПЕЧЕНИЕ ДИСЦИПЛИНЫ
а) основная литература:1. Звонников В.И. Современные средства оценивания результатов обучения:
учеб.пособие для студ.высш.учеб.заведений / В.И. Звонников, М.Б. Челышкова. – М.: Издательский центр «Академия», 2007. – 224 с.
б) дополнительная литература:
1. Аванесов В.С. Композиция тестовых заданий. М., 2. Анастази А., Урбина С. Психологическое тестирование. СПб., 3. ЕГЭ. Сборник нормативных документов. М., 4. Кларин. М.В. Технологический подход к обучению // Школьные технологии. № 5. 2003. – С. 3 – 22.
5. Майоров А.Н. Тесты и их виды. Тесты достижений. Школьные технологии. -№ 4. – 1998. – С.176.
6. Майоров А.Н. Тесты и их виды. Тесты достижений. Школьные технологии. -№ 3. – 1999.
7. Поташник М.М. Качество образования: проблемы и технологии управления (В вопросах и ответах). – М.: Педагогическое общество России, 2002. – 352 с.
8. Самылкина Н.Н. Современные средства оценивания результатов обучения / Н.Н. Самылкина. – М.: БИНОМ. Лаборатория знаний, 2007. – 172 с.
9. Челышкова М.Б., Хлебников В.А. Основные подходы к оценке качества подготовки обучаемых // Проблемы качества, его нормирования и стандартов в образовании: Сб. науч. Ст. М., 10. Челышкова М.Б. Разработка педагогических тестов на основе современных математических моделей. М., в) периодические издания:
1. Периодические журналы «Школьные технологии». «Информатика в школе» и т.п.
2. Учебные и методические пособия, учебники, пособия для самостоятельной работы, сборники тренировочных тестов по различным дисциплинам.
г) мультимедийные средства:
проектор, экран д) Интернет-ресурсы:
1. Официальный сайт по подготовке к ГИА и ЕГЭ http://www3.ege.edu.ru/ 2. Официальный сайт ЕГЭ государственного выпускного экзамена и государственной (итоговой) аттестации выпускников IX классов в новой форм.http://www1.ege.edu.ru/ компьютерные программы:
1. Программа «Камертон-мини».
2. Программный модуль «Master Test», Конструктор тестов Keepsoft, 3. Программные модули «Репетитор» по конкретным предметам.
4. Учебные и методические пособия, учебники, пособия для самостоятельной работы, сборники тренировочных тестов по различным
6. МАТЕРИАЛЬНО – ТЕХНИЧЕСКОЕ ОБЕСПЕЧЕНИЕ ДИСЦИПЛИНЫ
Для обеспечения данной дисциплины имеется:– оборудованный компьютерный класс, аудитории;
– технические средства обучения: видеомагнитофон, диапроектор, мультимедийный портативный переносной проектор, мультимедийное обеспечение, настенный экран.
7. СОДЕРЖАНИЕ ТЕКУЩЕГО И ПРОМЕЖУТОЧНОГО КОНТРОЛЯ
7.1. Вопросы к зачету:1. Расскажите о понятии «качество образования». Охарактеризуйте оценку как элемент управления качеством.
2. Сравните традиционные и новые средства оценки результатов обучения.
Опишите их достоинства и недостатки.
3. Как оценивается качество российского образования отечественными и зарубежными экспертами?
4. Расскажите историю возникновения тестирования в России.
5. Каковы причины запрета применения тестов в России в 20-30-ые годы ХХ века?
6. Назовите современные центры тестирования.
7. Назовите функции контроля в современном учебном процессе.
8. Назовите традиционные формы контроля. Укажите их достоинства и недостатки.
9. Какие современные средства контроля выделяются в учебном процессе?
В чем их преимущество по сравнению с традиционными формами контроля?
10. Укажите место психологических и педагогических измерений в современном образовании.
11. Охарактеризуйте цели и задачи педагогического и психологического тестирования.
12. Сходство и различие педагогических и психологических тестов в учебном процессе.
13. Назовите психологические тесты, применяемые в учебном процессе.
14. Расскажите о таксономии образовательных целей (по Гулумму) 15. Охарактеризуйте основные подходы к структуре учебных достижений.
16. Дайте определения следующим понятиям: тест, предтестовое задание, валидность теста, надежность теста.
17. Расскажите о видах тестов.
18. Охарактеризуйте основные положения классической теории тестов.
19. Расскажите о теории моделирования и параметризации педагогических тестов.
20. Расскажите о понятии «трудность теста».
21. Раскройте определение дискриминационной способности задания.
22. Опишите виды педагогического контроля (текущий, тематический, рубежный, итоговый контроль).
23. Дайте классификацию тестов по разным основаниям.
24. Понятие гомогенных и гетерогенных тестов.
25. Расскажите о применении компьютерного тестирования.
26. Раскройте возможности адаптивного компьютерного тестирования.
27. Сопоставьте критериально – ориентированные и нормативно – ориентированные педагогические тесты. В чем их отличие?
28. Назовите основные виды заданий в тестовой форме.
29. Как определяются цели тестов?
30. Расскажите о структуре тестового задания.
31. На какие принципы необходимо опираться при отборе содержания тестового задания?
32. Как производится экспертиза качества содержания теста?
33. Расскажите об основных подходах к качеству знаний.
34. Охарактеризуйте мониторинг как средство оценки результатов обучения.
35. Назовите основные свойства мониторинга качества образования.
36. Виды мониторинга.
37. Назовите методы педагогического мониторинга.
38. Какие погрешности возможны при педагогических измерениях. Как определяются и оцениваются погрешности при измерении?
39. Назовите и охарактеризуйте основные модели педагогических измерений.
40. Расскажите о видах оценочных шкал. Дайте характеристику одному из пакетов прикладных программ по обработке или конструированию тестов.
41. Опишите достоинства и недостатки «портфолио» как средства оценки результатов обучения.
42. Расскажите о задачах ЕГЭ. Каковы преимущества и недостатки ЕГЭ перед другими формами контроля?
43. Проанализируйте нормативные документы, регулирующие проведение ЕГЭ (Положение о проведении ЕГЭ, утверждение приказом Министерства образования РФ от 09.04.2002. № 1306; Положение о государственной экзаменационной комиссии субъекта РФ (ГЭК); Положение о конфликтной комиссии; Положение о системе общественного наблюдения).
44. Опишите организацию проведения ЕГЭ.
45. Опишите структуру заданий ЕГЭ.
46. Расскажите о порядке создания контрольно-измерительных материалов (КИМов) для ЕГЭ.
47. Каков порядок проверки тестовых заданий ЕГЭ?
48. Расскажите о требованиях к пунктам проведения ЕГЭ.
7.2. Оценочные средства для промежуточной аттестации 1. Признак тестового задания – это (выбрать наиболее правильный ответ):
1) краткое условие.
2) наличие инструкции.
3) наличие эталона ответа.
4) однозначность оценивания.
2. Французкий психолог, разработавший оригинальные методики измерения интеллекта… 3. Равноценная вероятность выбора дистрактора при неправильном ответе наывается….дистрактора 4. Тест, основной целью которого является определение уровня освоения учащимся содержания какого-либо предмета, дисциплины, раздела, темы, называется …-… тестом.
5. Для выявления причин пробелов в знаниях предназначены …. тесты.
6. В данном примере тестовое задание относится к следующей форме тестовых заданий:
противоположные значения это … 1) открытой формы 2) закрытой формы 3) на дополнение 4) на соответствие 7. Ученый, впервые использовавший тестовые технологии 8. Система оценивания, при которой предполагается несколько категорий ответов называется … 1) Дихотомическая 2) Политомическая 3) Вербальная 4) Невербальная 9. К заданиям открытого типа относятся задания:
1) на дополнение 2) восстановление последовательности 3) установление соответствия 4) с выбором ответа (ов) 5) со свободным изложением 10. Число дистракторов в ответе на предыдущее задание закрытой формы равно… 11. Организационными признаками оценки являются..
1) Оценка накопительная и вычитательная 2) Оценка обязательная и добровольная 3) Оценка статическая и динамическая 4) Оценка развития и состояния 12. Причинами возникновения идеи адаптивного тестирования явилось желание:
1. уменьшить время тестирования;
2. увеличить число заданий в тесте;
3. уменьшить число заданий в тесте;
4. повысить точность измерений;
5. уменьшить число тестируемых.
13. Тест, предназначенный для контроля знаний и умений по нескольким предметам (дисциплинам) называется … 14. Тестирование, которое решает задачу: выявить уровень базовых знаний учащихся, необходимых для начала обучения называется тестированием.
15. Тесты для группового тестирования впервые использовал… 16. Современная педагогическая технология 1) определяет способ передачи знаний, умений и навыков;
2) определяет способ формирования и развития личности;
3) опирается на процессы памяти;
4) опирается на процессы мышления.
17. Американский ученый, впервые разработавший умственные тесты, это….
18. Оценить учебные, творческие, коммуникативные способности школьника можно благодаря …..
1. Педагогический тест – это (выбрать наиболее правильный ответ):
1) Краткое стандартизированное испытание, предназначенное для распознавания интересующих особенностей и качеств личности.
2) Объективное и стандартизированное измерение, легко поддающееся количественной оценке, статистической обработке и сравнительному анализу.
3) Совокупность взаимосвязанных заданий возрастающей сложности, позволяющих выявить структуру знаний и умений и измерить их.
4) Результат применения теста как метода измерения, состоящего из ограниченного множества заданий.
2. Американский психолог, который в начале 20 века предложил разделить тесты на психологические и педагогические… 3. Точность педагогического измерения, устойчивость результатов тестирования к воздействию посторонних (случайных) факторов называется…теста 4. Неправильные, но правдоподобные варианты ответов в заданиях с выбором ответов, называются ….
5. Установите соответствие между видом теста и преобладающей трудностью заданий в этом тесте: проставьте соответствующую букву этапа возле каждой цифры (1_, 2).
2. Нормативно-ориентированный тест 6. Установите последовательность этапов организации процесса измерения уровня подготовленности обучаемых (каждой цифре поставьте в соответствие букву: 1) ; 2) ; и т.д.).
Выбор «цифровой символизации»;
Выделение для измерения конкретных знаний, умений и навыков;
Оценивание уровня подготовленности.
Обработка и оценка результатов измерения.
7. Тест, основной целью которого является наибольшая дифференциация учащихся для сравнения их учебных достижений, называется …-… тестом.
8. Первый педагогический тест разработал...
9. Установите соответствие между основаниями классификации тестов (столбец 1) и видами тестов (столбец 2) (каждой цифре поставьте в соответствие букву: 1) ; 2) ; и т.д.).
2) средства предъявления 3) направленность 4) характер действий 5) ведущая ориентация 6) степень однородности задач 7) цель использования 10. В данном примере тестовое задание относится к следующей форме тестовых заданий:
Задание: В хозяйстве восточных славян преобладало:
А) скотоводство В) рыбоводство Г) земледелие 1) открытой формы 2) закрытой формы 3) на дополнение 4) на соответствие 11. Для оценивания тестовых заданий закрытого типа (с выбором одного правильного ответа) используются вид оценки … 1) Дихотомическая 2) Политомическая 3) Вербальная 4) Невербальная 12. Недостатком тестовых заданий закрытой формы является … 1) Объективное оценивание задания 2) Возможность угадывания ответа 3) Легко обрабатываются 4) Возможность использования компьютера.
13. Содержательная валидность теста это соответствие … 1) Возрасту учащихся 2) Целям обучения 3) Программе обучения 4) Уровню обучаемых 14. Из 115 учащихся тестовое задание выполнили верно 35 человек.
Трудность тестового задания составила … 15. Трудность теста определяется … 1) Суммой трудностей всех заданий, входящих в тест 2) Суммой баллов, проставленных за каждый уровень 3) Средним арифметическим всех баллов, полученных за тест 4) Средним арифметическим трудности всех заданий 16. Критериальная валидность теста считается удовлетворительной, если она больше ….
17. Качественными признаками оценки являются..
Оценка обязательная и добровольная Оценка базового уровня и повышенного 18. Среди перечисленных показателей могут характеризовать тестовое задание 1) правдоподобность 2) валидность 3) надежность 4) дискриминативность 19. Для критериально-ориентированного теста коэффициент надежности считается приемлимым, если он больше 20.Минимальное количество испытуемых, необходимое для апробации теста и подсчета характеристик в современной теории тестов приблизительно равно ….
21. Тест, предназначенный для контроля знаний и умений по одному предмету (дисциплине) называется … 22. Россия вошла в международную ассоциацию по оценке учебных достижений в … году.
23. Пробное тестирование преследует цели 1) определение уровня знаний испытуемых 2) определение статистических характеристик тестовых заданий 3) выявление заданий, в которых есть ошибки.
24. Оценка, при которой за верный ответ дается 1 балл, а за неверный – 0, называется… оценкой.
25. Ученый, который впервые ввел балльную систему оценивания 26. Ученый, который ввел взаимоотношение двух параметров: уровня подготовленности и трудности задания 27. Показатель, который позволяет судить о том, насколько задание пригодно для достижения поставленных целей называется….задания.
28. Пробное тестирование обязательно должно проводиться на … выборке.
29.В советском союзе в …году было пресечено развитие тестовых технологий на долгие годы.
30. Система оценивания, учитывающая результаты текущей успеваемости в итоговой оценке по предмету, называется…системой оценивания.
31. Сколько ошибок в профиле ответов Бочаровой О.?
№ Ф.И.О 32. Способность задания разделять испытуемых по уровню достижений на сильных и слабых называется… задания.
33. Комплекс процедур, позволяющий создать для всех испытуемых равные условия, называется …..
34. Для оценки надежности нормативно-ориентированного теста используются методы (выбрать правильные ответы).
метод Кьюдера-Ричардсона;
7.3. Примерные темы рефератов 1. История развития тестирования в России.
2. Основные подходы к оценке качества подготовки и способы их реализации.
3. Система оценивания и контроль качества образования в образовательных учреждениях разного типа и уровня.
4. Современные тенденции в оценивании школьных достижений.
5. Виды контроля в учебном процессе.
6. Функции оценки в современном учебном процессе.
7. Проблема выбора способа оценивания для различных профилей обучения.
8. Критерии отбора содержания для составления тестовых заданий.
9. Понятие «портфолио» в современном образовательном процессе.
8. МЕТОДИЧЕСКИЕ УКАЗАНИЯ К ПРАКТИЧЕСКИМ ЗАНЯТИЯМ
В соответствии с задачами подготовки студентов в программе по дисциплине «Современные средства оценивания результатов обучения» раскрываются задачи, содержание и методы тестирования по профилю специальности, связи с другими науками.Программа курса «Современные средства оценивания результатов обучения»
реализуется в процессе чтения лекций, проведения практических (лабораторных) занятий, организации самостоятельной работы студентов, групповых, индивидуальных консультаций, собеседований в связи с подготовкой к зачету, написания рефератов, докладов для научно-методических студенческих конференций, проведения педпрактики.
Рассмотрение программного материала предваряется определением его основной направленности, значения и актуальности. На лекциях раскрывается исторический аспект развития средств оценки, фиксируется внимание на новейших поисках и перспективах развития различных методик оценивания результатов обучения и контроля качества образования.
На практических занятиях рассматриваются основные типы задач на составление тестовых заданий, приведены конкретные примеры практических заданий, иллюстрирующие уровень возможной сложности тестовых заданий. Разработка заданий определенного типа осуществляется преподавателем с учетом имеющейся в распоряжении вуза материальной базы, учебно-методической литературы.
Учебная работа студентов в рамках данного курса предусматривает лабораторные занятия в компьютерном классе, в ходе которых под руководством преподавателя осуществляется знакомство с пакетами прикладных программ в соответствии с предложенной тематикой. При этом в ходе самостоятельной индивидуальной работы студент должен пройти аттестационные компьютерные тесты централизованного тестирования по данной дисциплине. Завершающим этапом практической работы является составление тестовых заданий по профилю специальности, их апробация и статистическая обработка.
При самостоятельном изучении разделов студенты пишут конспекты по предложенной литературе, готовят выступления в виде докладов и сообщений.
ЛИСТ СОГЛАСОВАНИЯ РАБОЧЕЙ ПРОГРАММЫ ДИСЦИПЛИНЫ
ДОПОЛНЕНИЯ И ИЗМЕНЕНИЯ В РАБОЧЕЙ ПРОГРАММЕ
ДИСЦИПЛИНЫ
«Современные средства оценивания результатов обучения»
ОЦЕНКА КАК ЭЛЕМЕНТ УПРАВЛЕНИЯ КАЧЕСТВОМ.
ТРАДИЦИОННЫЕ И НОВЫЕ СРЕДСТВА ОЦЕНКИ РЕЗУЛЬТАТОВ
ОБУЧЕНИЯ
Раздел 1. Организация контроля качества обучения Тема «Оценка как элемент управления качеством. Традиционные и новые средства оценки результатов обучения».Понятие о качестве образования. Показатели качества образования.
Соотношение видов знаний в системах “поддерживающего” и “опережающего” образования.
Виды контроля (входной, текущий и итоговый). Формы и организация контроля. Оценка, ее функции. Связь оценки и самооценки.
СОВРЕМЕННЫЕ СРЕДСТВА ОЦЕНКИ РЕЗУЛЬТАТОВ ОБУЧЕНИЯ:
МОНИТОРИНГ, РЕЙТИНГ, ПОРТФОЛИО
Раздел 1.Тема «Современные средства оценки результатов обучения: мониторинг, рейтинг, портфолио»
Отличие мониторинга от традиционных проверок.
Преимущества рейтинговой системы оценивания.
Накопительная оценка в форме «портфолио», задачи портфолио.
ИСТОРИЯ РАЗВИТИЯ СИСТЕМЫ ТЕСТИРОВАНИЯ ЗА РУБЕЖОМ
И В РОССИИ
Раздел 2. Психолого-педагогические аспекты тестирования.Тема «История развития системы тестирования за рубежом и в России».
Возникновение тестирования. Ф.Гальтон – родоначальник тестового движения. Тесты Дж. Кеттела, А. Бине, Т. Симона, Дж. Фамера.
Деление тестов на педагогические и психологические. Первые педагогические тесты Э. Торндайка.
Современная теория тестов (IRT). История ее создания.
Развитие тестирования в России. Начало развития тестирования в рамках педологии. Период игнорирования тестов. Использование тестов в 70-е годы XX в.
Современные центры тестирования.
ПЕДАГОГИЧЕСКИЕ ТЕСТЫ. ТЕРМИНЫ И ОПРЕДЕЛЕНИЯ.
КЛАССИФИКАЦИЯ ПЕДАГОГИЧЕСКИХ ТЕСТОВ
Раздел Тема «Педагогические тесты. Термины и определения».Понятийный аппарат тестологии. Понятие теста.
Классификация тестов по разным основаниям. Зависимость видов и форм тестов от специфики учебной дисциплины.
Тематические тесты, рубежные, итоговая аттестация. Диагностическое тестирование.
Основные виды педагогических тестов, критериально-ориентированный (КОПТ) и нормативно–ориентированный (НОПТ), их сопоставление.
Компьютерное тестирование.
Адаптированное компьютерное тестирование
ОСНОВНЫЕ ЭТАПЫ РАЗРАБОТКИ ПЕДАГОГИЧЕСКОГО ТЕСТА
Раздел 2.Тема «Основные этапы разработки педагогического теста».
Определение цели тестирования, области содержания, выбор вида теста, подхода к его созданию.
Анализ содержания учебной дисциплины и отбор содержания для теста.
Определение структуры теста. Разработка спецификации теста.
Составление тестовых (предтестовых) заданий.
Экспертный анализ содержания и формы тестовых заданий.
Разработка и проведение пробного тестирования.
Сбор эмпирических результатов. Статистическая об-работка результатов тестирования.
Оценка качества тестовых заданий и теста в целом с помощью статистических методов.
СТАНДАРТИЗАЦИЯ ТЕСТА И ИНТЕРПРЕТАЦИЯ РЕЗУЛЬТАТОВ
ТЕСТИРОВАНИЯ
Раздел 3. ЕГЭ и качество образования Тема «Стандартизация теста и интерпретация результатов тестирования».Педагогические измерения. Шкалирование результатов тестирования.
Статистические характеристики теста.
Стандартизация теста. Вариативность тестов.
Создание параллельных вариантов. Фасет.
Пакеты прикладных программ обработки и конструирования тестов.
«Современные средства оценивания результатов обучения»
а) основная литература:
1. Звонников В.И. Современные средства оценивания результатов обучения:
учеб.пособие для студ.высш.учеб.заведений / В.И. Звонников, М.Б. Челышкова. – М.: Издательский центр «Академия», 2007. – 224 с.
б) дополнительная литература:
1. Аванесов В.С. Композиция тестовых заданий. М., 2. Самылкина Н.Н. Современные средства оценивания результатов обучения / Н.Н. Самылкина. – М.: БИНОМ. Лаборатория знаний, 2007. – 172 с.
Тема «Тестовые задания. Типы и формы тестовых заданий»
Основные понятия теории тестирования.
Виды и функции педагогического контроля Структура тестового задания Формы тестовых заданий. Тестовые задания открытой и закрытой формы.
Требования к заданиям в тестовой форме.
Составление тестовых заданий.
Методические указания:
При обсуждении каждого вопроса рассматриваются конкретные примеры тестовых заданий по предмету.
Задание для самостоятельной работы: разработать тестовые задания различного типа и формы по математике (на примере конкретной темы).
1. Таксономия образовательных целей. Основные подходы.
2. Проектирование образовательных целей на примере конкретной темы Оборудование: обобщенные типы образовательных целей, примеры проектирования образовательных целей студентами 4-5го курсов, учебники.
Методические указания: для проектирования образовательных целей использовать имеющиеся на кафедре методические пособия.
Задание для самостоятельной работы: Разработать тестовые задания, адекватные спроектированным целям.
Тема: «Анализ содержания учебной дисциплины и отбор содержания для теста.
Определение структуры теста. Разработка спецификации теста»
Тема «Эмпирическая проверка и статистическая обработка результатов 1. Проведение экспертизы.
2. Разработка бланка теста.
3. Составление матрицы. Понятие верных и неверных профилей ответов.
4. Обработка результатов: график 5. Обработка результатов: меры центральной тенденции 6. Обработка результатов: меры изменчивости 7. Обработка результатов: меры симметрии и островершинности кривых распределений.
Оборудование: бланки результатов выполнения теста, примеры графиков.
Методические указания: возможно проведение занятия в компьютерном классе.
Задание для самостоятельной работы: Разработать тест по ранее составленной спецификации (2 варианта теста, в каждом по 10 заданий с выбором ответов, по 5 заданий на дополнение, по 2 задания на соответствие или упорядочение), провести экспертизу (2 эксперта). Разработать бланк для бланочного тестирования для своего теста 1. Программа «Камертон», ее назначение.
2. Обработка результатов тестирования в программе «Камертон».
Оборудование: результаты выполнения входного теста по ТиМОМ студентами.
Методические указания: занятие проводится в компьютерном классе.
Задание для самостоятельной работы: Обработать результаты составленного теста в программе «Камертон».
Тема «Структура КИМов ЕГЭ: задания типов А,В,С и централизованного 1. Охарактеризовать структуру КИМов для ЕГЭ и централизованного тестирования.
2. Спецификация теста для ЕГЭ по предмету.
3. Особенности решения заданий разных уровней.
Оборудование: варианты заданий для ЕГЭ по предмету, варианты спецификации тестов.
Методические указания: при обсуждении каждого вопроса рассматриваются конкретные примеры.
Задание для самостоятельной работы: решить один из вариантов ЕГЭ и централизованного тестирования по предмету.
МАТЕРИАЛЫ КОНТРОЛЯ ЗНАНИЙ
Выступление на семинарских и семинарско-практических занятиях.Проверка и рецензирование выполнения письменных учебных заданий.
Собеседование на консультации.
1. Расскажите о понятии «качество образования». Охарактеризуйте оценку как элемент управления качеством.
2. Сравните традиционные и новые средства оценки результатов обучения.
Опишите их достоинства и недостатки.
3. Как оценивается качество российского образования отечественными и зарубежными экспертами?
4. Расскажите историю возникновения тестирования в России.
5. Каковы причины запрета применения тестов в России в 20-30-ые годы ХХ века?
6. Назовите современные центры тестирования.
7. Назовите функции контроля в современном учебном процессе.
8. Назовите традиционные формы контроля. Укажите их достоинства и недостатки.
9. Какие современные средства контроля выделяются в учебном процессе? В чем их преимущество по сравнению с традиционными формами контроля?
10. Укажите место психологических и педагогических измерений в современном образовании.
11. Охарактеризуйте цели и задачи педагогического и психологического тестирования.
12. Сходство и различие педагогических и психологических тестов в учебном процессе.
13. Назовите психологические тесты, применяемые в учебном процессе.
14. Расскажите о таксономии образовательных целей (по Гулумму) 15. Охарактеризуйте основные подходы к структуре учебных достижений.
16. Дайте определения следующим понятиям: тест, предтестовое задание, валидность теста, надежность теста.
17. Расскажите о видах тестов.
18. Охарактеризуйте основные положения классической теории тестов.
19. Расскажите о теории моделирования и параметризации педагогических тестов.
20. Расскажите о понятии «трудность теста».
21. Раскройте определение дискриминационной способности задания.
22. Опишите виды педагогического контроля (текущий, тематический, рубежный, итоговый контроль).
23. Дайте классификацию тестов по разным основаниям.
24. Понятие гомогенных и гетерогенных тестов.
25. Расскажите о применении компьютерного тестирования.
26. Раскройте возможности адаптивного компьютерного тестирования.
27. Сопоставьте критериально – ориентированные и нормативно – ориентированные педагогические тесты. В чем их отличие?
28. Назовите основные виды заданий в тестовой форме.
29. Как определяются цели тестов?
30. Расскажите о структуре тестового задания.
31. На какие принципы необходимо опираться при отборе содержания тестового задания?
32. Как производится экспертиза качества содержания теста?
33. Расскажите об основных подходах к качеству знаний.
34. Охарактеризуйте мониторинг как средство оценки результатов обучения.
35. Назовите основные свойства мониторинга качества образования.
36. Виды мониторинга.
37. Назовите методы педагогического мониторинга.
38. Какие погрешности возможны при педагогических измерениях. Как определяются и оцениваются погрешности при измерении?
39. Назовите и охарактеризуйте основные модели педагогических измерений.
40. Расскажите о видах оценочных шкал. Дайте характеристику одному из пакетов прикладных программ по обработке или конструированию тестов.
41. Опишите достоинства и недостатки «портфолио» как средства оценки результатов обучения.
42. Расскажите о задачах ЕГЭ. Каковы преимущества и недостатки ЕГЭ перед другими формами контроля?
43. Проанализируйте нормативные документы, регулирующие проведение ЕГЭ (Положение о проведении ЕГЭ, утверждение приказом Министерства образования РФ от 09.04.2002. № 1306; Положение о государственной экзаменационной комиссии субъекта РФ (ГЭК); Положение о конфликтной комиссии; Положение о системе общественного наблюдения).
44. Опишите организацию проведения ЕГЭ.
45. Опишите структуру заданий ЕГЭ.
46. Расскажите о порядке создания контрольно-измерительных материалов (КИМ-ов) для ЕГЭ.
47. Каков порядок проверки тестовых заданий ЕГЭ?
48. Расскажите о требованиях к пунктам проведения ЕГЭ.
1. История развития тестирования в России.
2. Основные подходы к оценке качества подготовки и способы их реализации.
3. Система оценивания и контроль качества образования в образовательных учреждениях разного типа и уровня.
4. Современные тенденции в оценивании школьных достижений.
5. Виды контроля в учебном процессе.
6. Функции оценки в современном учебном процессе.
7. Проблема выбора способа оценивания для различных профилей обучения.
8. Критерии отбора содержания для составления тестовых заданий.
9. Понятие «портфолио» в современном образовательном процессе.
10. Единый государственный экзамен: концепция, реализация, проблемы.
Оценочные средства для промежуточной аттестации 1. Педагогический тест – это (выбрать наиболее правильный ответ):
1) Краткое стандартизированное испытание, предназначенное для распознавания интересующих особенностей и качеств личности.
2) Объективное и стандартизированное измерение, легко поддающееся количественной оценке, статистической обработке и сравнительному анализу.
3) Совокупность взаимосвязанных заданий возрастающей сложности, позволяющих выявить структуру знаний и умений и измерить их.
4) Результат применения теста как метода измерения, состоящего из ограниченного множества заданий.
2. Американский психолог, который в начале 20 века предложил разделить тесты на психологические и педагогические… 3. Точность педагогического измерения, устойчивость результатов тестирования к воздействию посторонних (случайных) факторов называется…теста 4. Неправильные, но правдоподобные варианты ответов в заданиях с выбором ответов, называются ….
5. Установите соответствие между видом теста и преобладающей трудностью заданий в этом тесте: проставьте соответствующую букву этапа возле каждой цифры (1_, 2).
2. Нормативно-ориентированный тест 6. Установите последовательность этапов организации процесса измерения уровня подготовленности обучаемых (каждой цифре поставьте в соответствие букву: 1) ; 2) ; и т.д.).
Выбор «цифровой символизации»;
Выделение для измерения конкретных знаний, умений и навыков;
Оценивание уровня подготовленности.
Обработка и оценка результатов измерения.
7. Тест, основной целью которого является наибольшая дифференциация учащихся для сравнения их учебных достижений, называется …-… тестом.
8. Первый педагогический тест разработал...
9. Установите соответствие между основаниями классификации тестов (столбец 1) и видами тестов (столбец 2) (каждой цифре поставьте в соответствие букву: 1) ; 2) ; и т.д.).
2) средства предъявления 3) направленность 4) характер действий 5) ведущая ориентация 6) степень однородности задач 7) цель использования 10. В данном примере тестовое задание относится к следующей форме тестовых заданий:
Задание: В хозяйстве восточных славян преобладало:
А) скотоводство В) рыбоводство Г) земледелие 1) открытой формы 2) закрытой формы 3) на дополнение 4) на соответствие 11. Для оценивания тестовых заданий закрытого типа (с выбором одного правильного ответа) используются вид оценки … 1) Дихотомическая 2) Политомическая 3) Вербальная 4) Невербальная 12. Недостатком тестовых заданий закрытой формы является … 1) Объективное оценивание задания 2) Возможность угадывания ответа 3) Легко обрабатываются 4) Возможность использования компьютера.
13. Содержательная валидность теста это соответствие … 1) Возрасту учащихся 2) Целям обучения 3) Программе обучения 4) Уровню обучаемых 14. Из 115 учащихся тестовое задание выполнили верно 35 человек.
Трудность тестового задания составила … 15. Трудность теста определяется … 1) Суммой трудностей всех заданий, входящих в тест 2) Суммой баллов, проставленных за каждый уровень 3) Средним арифметическим всех баллов, полученных за тест 4) Средним арифметическим трудности всех заданий 16. Критериальная валидность теста считается удовлетворительной, если она больше ….
17. Качественными признаками оценки являются..
Оценка обязательная и добровольная Оценка базового уровня и повышенного 18. Среди перечисленных показателей могут характеризовать тестовое задание 1) правдоподобность 2) валидность 3) надежность 4) дискриминативность 19. Для критериально-ориентированного теста коэффициент надежности считается приемлимым, если он больше 20.Минимальное количество испытуемых, необходимое для апробации теста и подсчета характеристик в современной теории тестов приблизительно равно ….
21. Тест, предназначенный для контроля знаний и умений по одному предмету (дисциплине) называется … 22. Россия вошла в международную ассоциацию по оценке учебных достижений в … году.
23. Пробное тестирование преследует цели 1) определение уровня знаний испытуемых 2) определение статистических характеристик тестовых заданий 3) выявление заданий, в которых есть ошибки.
24. Оценка, при которой за верный ответ дается 1 балл, а за неверный – 0, называется… оценкой.
25. Ученый, который впервые ввел балльную систему оценивания 26. Ученый, который ввел взаимоотношение двух параметров: уровня подготовленности и трудности задания 27. Показатель, который позволяет судить о том, насколько задание пригодно для достижения поставленных целей называется….задания.
28. Пробное тестирование обязательно должно проводиться на … выборке.
29.В советском союзе в …году было пресечено развитие тестовых технологий на долгие годы.
30. Система оценивания, учитывающая результаты текущей успеваемости в итоговой оценке по предмету, называется…системой оценивания.
31. Сколько ошибок в профиле ответов Бочаровой О.?
№ Ф.И.О 32. Способность задания разделять испытуемых по уровню достижений на сильных и слабых называется… задания.
33. Комплекс процедур, позволяющий создать для всех испытуемых равные условия, называется …..
34. Для оценки надежности нормативно-ориентированного теста используются методы (выбрать правильные ответы).
10. метод расщепления теста;
11. метод Кьюдера-Ричардсона;
12. каппа-коэффициент.
а) основная литература:
1. Звонников В.И. Современные средства оценивания результатов обучения:
учеб.пособие для студ.высш.учеб.заведений / В.И. Звонников, М.Б. Челышкова. – М.: Издательский центр «Академия», 2007. – 224 с.
б) дополнительная литература:
1. Аванесов В.С. Композиция тестовых заданий. М., 2. Анастази А., Урбина С. Психологическое тестирование. СПб., 3. ЕГЭ. Сборник нормативных документов. М., 4. Кларин. М.В. Технологический подход к обучению // Школьные технологии. № 5. 2003. – С. 3 – 22.
5. Майоров А.Н. Тесты и их виды. Тесты достижений. Школьные технологии. -№ 4. – 1998. – С.176.
6. Майоров А.Н. Тесты и их виды. Тесты достижений. Школьные технологии. -№ 3. – 1999.
7. Поташник М.М. Качество образования: проблемы и технологии управления (В вопросах и ответах). – М.: Педагогическое общество России, 2002. – 352 с.
8. Самылкина Н.Н. Современные средства оценивания результатов обучения / Н.Н. Самылкина. – М.: БИНОМ. Лаборатория знаний, 2007. – 172 с.
9. Челышкова М.Б., Хлебников В.А. Основные подходы к оценке качества подготовки обучаемых // Проблемы качества, его нормирования и стандартов в образовании: Сб. науч. Ст. М., 10. Челышкова М.Б. Разработка педагогических тестов на основе современных математических моделей. М., в) периодические издания:
1. Периодические журналы «Школьные технологии». «Информатика в школе» и т.п.
2. Учебные и методические пособия, учебники, пособия для самостоятельной работы, сборники тренировочных тестов по различным дисциплинам.
г) мультимедийные средства:
проектор, экран д) Интернет-ресурсы:
1. Официальный сайт по подготовке к ГИА и ЕГЭ http://www3.ege.edu.ru/ 2. Официальный сайт ЕГЭ государственного выпускного экзамена и государственной (итоговой) аттестации выпускников IX классов в новой форм.http://www1.ege.edu.ru/
«