«Пензенский государственный педагогический университет имени B. Г. Белинского Кафедра английского языка УЧЕБНО-МЕТОДИЧЕСКИЙ КОМПЛЕКС ПО ДИСЦИПЛИНЕ СОВРЕМЕННЫЕ СРЕДСТВА ОЦЕНИВАНИЯ РЕЗУЛЬТАТОВ ОБУЧЕНИЯ 0503030 Иностранный ...»

Естественно, что определение нормы качества образования со стороны государства (в силу сложности и многоплановости проблемы) требует введения системы эталонов, которая нашла свое отражение в различных концепциях стандарта образования (9), (10), (11). Кроме того, она отражает точку зрения на качество образования только одной стороны - государства. Все оценки на экзаменах, зачетах и прочие, полученные в процессе учебы, можно рассматривать лишь как внутренние и промежуточные, которые, в лучшем случае, могут дать, хотя и очень полезную и важную (отражающую интерпретацию образовательным учреждением государственного стандарта образования), но все-таки косвенную и достаточно условную, предметно ориентированную оценку качества профессиональной подготовки студента и выпускника.

2. Традиционные и новые средства оценки результатов обучения.

Разработка общих принципов методологии оценивания до сих пор остается проблемой потому, что исключительно трудно осуществить последовательное сопоставление целей образования с достигаемыми результатами обучения. Цели выражены, как правило, в весьма общих и потому абстрактных категориях: «подготовить квалифицированного специалиста», «сформировать научное мировоззрение», «вооружить научной методологией» и т. п. Измерение же результатов обучения проводится на совсем ином уровне – более узком, более конкретном, более осязаемом. Получается, что конечные цели образования и результаты обучения, проверяемые в конкретной оценочной ситуации, формулируются на разных языках. Цели – на языке интегральных, общих категорий, а результаты – на языке конкретных знаний, умений, навыков, то есть языке действий. Для выработки эффективных и достаточно строгих критериев оценивания необходимо стараться излагать цели и результаты обучения на одном и том же языке, в одних и тех же понятиях и терминах, что не всегда представляется возможным.

Результаты контроля учебно-познавательной деятельности учащихся выражаются в ее оценке. Оценка – это определение степени усвоенности знаний, умений и навыков.

Количественным выражением оценки является отметка.

До настоящего времени не только в педагогической практике, но и в дидактической и методической литературе термины «оценка» и «отметка» иногда понимаются как синонимы. Часто, когда имеется в виду отметка, говорят оценка (выставление оценок, система оценок и т.д.). Между тем «оценка» и «отметка» – понятия хотя и близкие, но далеко не идентичные.

Отметка – это условное выражение количественной оценки знаний, умений и навыков обучаемых в цифрах или Галлах.

Оцениваться результаты обучения могут не только отметкой, но и другими средствами. Например, это может быть словесное одобрение и неодобрение, вынесение благодарности, награждение грамотами и медалями и т.д.

Балльная система оценки знаний учащихся существовала в России еще до революции 1917 г. Оценка знаний осуществлялась по шестибалльной системе с баллами от нуля до пяти. Затем нулевая оценка была упразднена, система превратилась в пятибалльную.

Отношение к оцениванию результатов обучения в баллах в истории школы было различным. После 1917г. получила развитие идея обучения без отметок. Согласно концепции советской трудовой школы учебная деятельность должна строиться на интересе учащихся, ориентироваться на самостоятельность, инициативу, творческий характер учения. Непригодными были признаны прежние методы дисциплинирования учащихся с помощью отметок. В мае 1918 г. вышло Постановление Наркомпроса РСФСР «Об отмене отметок», в котором определялось следующее:

• применение балльной системы для оценки познании поведения учащихся отменяется во всех без исключения в случаях школьной практики;

• перевод из класса в класс и выдача свидетельств производятся на основании успехов учащихся по отзывам педагогического совета об исполнении учебной работы.

Запрещались любые виды экзаменов: вступительные, переводные и выпускные.

Отменялась индивидуальная: проверка учащихся на уроке. Лишь в крайних случаях пускались фронтальные устные проверки и письменные работы зачетного характера.

Рекомендовались периодические беседы с учащимися по пройденной теме, их выступления о прочитанных книгах, статьях. Приветствовались отчеты учеников о самостоятельно выполненных работах по личному выбору. Вместо традиционной системы контроля основной формой стал самоконтроль, выявление достижений не отдельного учащегося, а школьного коллектива. Получили широкое распространение тестовые задания как одна из самых пригодных форм самоконтроля.

Обучение без отметок имело определенные положительные стороны, так как развивало у части обучаемых самостоятельность. Но в большинстве своем такое обучение приводило к снижению качества знаний, ухудшению дисциплины. Школьники перестали регулярно заниматься в школе и дома, посещать занятия. Поэтому сначала стихийно стали вводиться различные формы контроля, а в 1932 г. официально восстановлен принцип систематического учета знаний каждого ученика на основе индивидуального подхода.

В сентябре 1935 г. были введены пять словесных (вербальных) оценок:

«отлично», «хорошо», «удовлетворительно», «плохо», «очень плохо», которые просуществовали до конца 1943 г. В январе 1944 г. было принято решение заменить применявшиеся словесные оценки на цифровую пятибалльную систему оценки успеваемости и поведения учащихся. В вышедшей вслед за этим постановлением сформулированы параметры, за что выставляется та или иная отметка.

Введение регулярного учета знаний оправдало себя, учебная подготовка и дисциплина учащихся повысились.

Сложившаяся система оценивания результатов учебной деятельности в виде баллов несмотря на недостатки до сих пор не нашла достойной замены. Хотя некоторые обученности. Их главные аргументы:

• обученность фактически оценивается по трехбалльной шкале (отметки «1» и «2» фиксируют незнание);

• недостоверность оценки обученности (отметки «5», 4», «3» ставятся и в общеобразовательных школ, и в классах коррекционно-развивающего обучения, поэтому они не равнозначны);

трехбалльная шкала недостаточна, чтобы оценить знания учащихся (поэтому преподаватели используют суррогатную шкалу: к баллам добавляют «плюсы» и двенадцатибалльные, стобалльные и др.

Наряду с традиционными методиками оценивания все шире используется тестовый контроль знаний. Происходит тщательная эмпирическая проверка и шлифовка стандартных предметных тестов, и постепенно меняется психологическая привычка учителей и учащихся к самой процедуре тестирования.

Педагогическое тестирование как один из методов контроля усвоения обучаемыми знаний, умений и навыков обладает важными преимуществами перед традиционными методами контроля знаний. Вот некоторые из них:

1. Более высокая, чем в традиционных методах, объективность контроля. Обычно на оценку, получаемую студентами, влияют, помимо уровня его учебных достижений, многие другие факторы: личность преподавателя и самого студента, их взаимоотношения, строгость или, наоборот, либеральность преподавателя и т.п. В оценке, выставляемой на основе традиционных методов контроля, оказывается существенным субъективный компонент. Это подтверждается тем известным фактом, что за один и тот же ответ разные преподаватели могут поставить разные отметки. В тесте такое влияние субъективных факторов исключается. Если тест достаточно качественный, то получаемая оценка может рассматриваться как объективная.

2. Оценка, получаемая с помощью теста, более дифференцирована. В традиционных методах контроля пользуются четырехбалльной шкалой ("отлично", "хорошо", "удовлетворительно", " неудовлетворительно ").

Результаты тестирования, благодаря особой организации тестов, могут быть представлены, если необходимо, в более дифференцированных шкалах, содержащих больше градаций оценки. При этом обеспечивается более высокая точность измерений учебных достижений.

3. Тестирование обладает заметно более высокой эффективностью, чем традиционные методы контроля. Тесты можно одновременно проводить на больших группах студентов. Обработка результатов для получения окончательных оценок проводится легче, быстрее, чем, скажем, проверка контрольных работ. Особенно велика экономия времени, когда в форме тестирования проводятся экзамены.

Конечно, у тестирования как метода контроля есть и свои ограничения. Легче всего с помощью тестов проверять овладение просто организованным учебным материалом.

Проверка глубинного понимания предмета, овладения стилем мышления, свойственным изучаемой дисциплине, с помощью тестов затруднена, хотя в принципе возможна.

Отсутствие непосредственного контакта со студентом, с одной стороны, делает контроль более объективным, но, с другой стороны, повышает вероятность влияния на результат других случайных факторов. Например, невозможно проконтролировать случайные ошибки студента, вызванные невниманием или неправильным пониманием задания.

Существуют довольно изощренные методы, позволяющие в значительной степени преодолеть эти недостатки.

Ограничения тестирования как метода контроля необходимо хорошо осознавать, чтобы правильно применять тесты. В ряде случаев наилучший эффект дает сочетание тестов с традиционными методами контроля. Достоинство тестов заключается еще в том, что можно оценить степень вероятности влияния на результат случайных факторов и, следовательно, знать, насколько точен полученный результат.

3. Виды контроля (входной, текущий и итоговый).

Формы и организация контроля. Оценка, ее функции.

Контроль бывает разных видов, форм и может составляться с помощью разнообразных методов. В педагогической практике применяется несколько видов контроля предварительный, текущий, периодический, тематический, итоговый и отсроченный. Предварительный контроль, как правило, имеет диагностические задачи.

Он проводится с целью выявления имеющихся знаний, умений и навыков учащихся к начал) обучения. Применяется обычно в начале учебного года или перед изучением новой темы. Предварительный контроль позволяет обучающему выбрать наиболее эффективные методы и формы работы.

Текущий контроль осуществляется по ходу обучения и дает возможность определить степень сформированности знаний, умений, навыков, а также их глубину и прочность. Этот контроль позволяет своевременно выявить пробелы в знаниях учащихся и оказать им помощь в усвоении программного материала. Текущий контроль стимулирует ответственность ученика за подготовку к каждому занятию.

Периодический контроль подводит итоги работы за определенный период времени. Он осуществляется в конце четверти или полугодия.

Тематический контроль проводится после изучения темы, раздела для определения степени усвоенности данного материала.

Итоговый контроль призван определить конечные результаты обучения. Он охватывает всю систему знаний, умений и навыков по предмету.

Отсроченный контроль - определение остаточных знаний и умений спустя какое-то время после изучения темы, раздела, курса (этот срок может колебаться от трех месяцев до полугода и более). Отсроченный контроль как вид контроля соответствует требованию судить об эффективности процесса по конечному результату.

подразделяется на индивидуальный, групповой и фронтальный.

При контроле используются различные методы. Методы контроля – это способы, с помощью которых определяется результативность учебно-познавательной деятельнообучаемых и педагогической работы обучающих. В педагогической практике используются методы устного, письменного, практического, машинного контроля и самоконтроля.

Устный контроль осуществляется в процессе устного опpoca обучаемых. Он позволяет выявить знания обучаемых, проследить логику изложения ими материала, умение использовать знания для описания или объяснения процессов и происходящих событий, для выражения и доказательства своей точки зрения, для опровержения неверного мнения и т.д.

Письменный контроль предполагает выполнение письменных заданий (упражнений, контрольных работ, сочинений, отчетов и т.д.). Такой метод контроля позволяет проверять знания всех обучаемых одновременно, но требует больших временных затрат на проверку письменных заданий.

Практический контроль применяется для выявления сформированности умений и навыков практической работы или сформированности двигательных навыков.

С развитием информационных технологий распространение получил контроль с использованием компьютеров. Машинный контроль экономит время учащихся и учителя.

С помощью контролирующих машин легко установить единые требования к измерению и оцениванию знаний. Результаты контроля легко поддаются статистической обработке.

Устранятся субъективизм учителя при оценивании знаний.

Применение контролирующих машин позволяет успешно осуществлять самоконтроль. Самоконтроль возможен и без применения машин. Но для этого необходимо научить обучаемых самостоятельно находить ошибки, анализировать причины неправильного решения познавательных задач, искать способы их устранения.

Сочетание различных методов контроля называется комбинированным (уплотненным) контролем. Обычно сочетание устного и письменного опроса.

К контролю в процессе обучения предъявляются следующие педагогические требования:

• индивидуальный характер контроля. Контроль доли осуществляться за работой каждого ученика, за его личной учебной деятельностью. Нельзя допускать подмены результатов учения отдельных учащихся итогами работы коллектива, и наоборот;

• систематичность, регулярность проведения контроле на всех этапах процесса обучения;

• разнообразие форм проведения контроля, что в большей степени обеспечивает выполнение обучающей, развивающей и воспитывающей функций контроля;

• всесторонность контроля. Контроль должен давать возможность проверки теоретических знаний, интеллекту субъективные и ошибочные суждения и выводы;

индивидуальные личностные качества обучаемых;

• единство требований со стороны обучающих.

В последнее время все большее распространение получает тестовый контроль.

Основным инструментом такого контроля является тест. В зависимости от предмета измерения выделяются тесты педагогические, психологические, социологические, социально-психологические, культурологические и др.

Рейтинговая сумма баллов с учетом перечисленных выше активов формируется по результатам таких видов контроля, как:

1. Входной контроль — контроль знаний и умений студентов при начале обучения очередной дисциплине.

2. Текущий контроль — непрерывно осуществляемое "отслеживание" уровня усвоения знаний и умений студентами на лекциях, лабораторно-практических занятиях;

своевременного и аккуратного оформления отчета о лабораторной работе и его защите;

быстроты и точности решения ситуационных задач. По всем видам деятельности ведется учет баллов, принятый кафедрой, исходя из важности и трудности выполняемых работ.

3. Рубежный контроль — контроль умений и знаний студентов по окончании изучения темы (раздела), модуля. Этот вид контроля заключается в написании контрольной работы, расчетно-графическом задании или системе заданий в виде тестов.

4. Итоговый контроль — контроль знаний, умений, навыков и поддающихся критериально-оценочной процедуре личностных качеств. Итоговый контроль оформляется в виде зачетного или экзаменационного теста по всему предмету.

5.Отсроченный контроль — контроль остаточных знаний и умений спустя какое-то время после изучения темы, раздела, курса (этот срок может колебаться от 3 месяцев до полугода и более).

Поскольку рейтинг — это шкала достижений студентов, то совершенно очевидно, что должен быть стандартный инструмент измерения. Таким инструментом является правильно построенный и хорошо составленный тест, который соответствует не только предмету обучения, но и его задачам, является педагогическим тестом достижений.

Обычно в тесте нет заданий, на которые можно найти прямой ответ в учебнике, поэтому возможность списывания практически исключена или бессмысленна.

Таким образом, рейтинг служит развитию и закреплению системного подхода к изучению дисциплины. Это, пожалуй, наиболее важная положительная сторона рейтинга, кроме тех, что отмечены выше.

Обобщая достоинства рейтинговой системы как одного из инновационных методов, можно констатировать, что рейтинговая система — это не только оценка уровня усвоения знаний, но и метод системного подхода к изучению дисциплины. При рациональном, с дидактической позиции, разделении дисциплины на блоки возможно ее усвоение каждым обучающимся самостоятельно. В этом случае самостоятельная работа студентов, ее реализация в вузе, создает условия для развития личности студента. Самостоятельная деятельность по приобретению студентами знаний и умений предполагает четкую регламентацию обучения в зависимости от содержания предмета, условий обучения, уровня подготовленности студентов к восприятию и усвоению материала.

Функции оценки, как известно, не ограничиваются только констатацией уровня обученности. Оценка – единственное в распоряжении педагога средство стимулирования учения, положительной мотивации, влияния на личность. Именно под влиянием объективного оценивания у студентов создается адекватная самооценка, критическое отношение к своим успехам. Поэтому значимость оценки, разнообразие ее функций требуют поиска таких показателей, которые отражали бы все стороны учебной деятельности студенток и обеспечивали их выявление. С этой точки зрения ныне действующая система оценивания знаний, умений требует пересмотра с целью повышения ее диагностической значимости и объективности.

Важнейшими принципами диагностирования и контролирования обученности (успеваемости) обучающихся являются объективность, систематичность, наглядность (гласность). Объективность заключается в научно-обоснованном содержании диагностических тестов (заданий, вопросов), диагностических процедур, равном, дружеском отношении педагога ко всем обучаемым, точном, адекватном установленным критериям оценивании знаний, умений. Практически объективность диагностирования означает, что выставленные оценки совпадают независимо от методов и средств контролирования и педагогов, осуществляющих диагностирование.

Требование принципа систематичности состоит в необходимости проведения диагностического контролирования на всех этапах дидактического процесса — от начального восприятия знаний и до их практического применения. Систематичность заключается и в том, что регулярному диагностированию подвергаются все обучаемые с первого и до последнего дня пребывания в учебном заведении. Контроль необходимо осуществлять с такой частотой, чтобы надежно проверить все то важное, что обучаемым надлежит знать и уметь. Принцип системности требует комплексного подхода к проведению диагностирования, при котором различные формы, методы и средства контролирования проверки, оценивания используются в тесной взаимосвязи и единстве, подчиняются одной цели. Такой подход исключает универсальность отдельных методов и средств диагностирования.

Принцип наглядности (гласности) заключается прежде всего в проведении открытых испытаний всех обучаемых по одним и тем же критериям. Рейтинг каждого обучающегося, устанавливаемый в процессе диагностирования, носит наглядный, сравнимый характер. Принцип гласности требует также оглашения и мотивации оценок.

Оценка — это ориентир, по которому обучаемые судят об эталонах требований к ним, а также об объективности педагога. Необходимым условием реализации принципа является также объявление результатов диагностических срезов, обсуждение и анализ их с участием заинтересованных людей, составление перспективных планов ликвидации пробелов.

Диагностировать, контролировать, проверять и оценивать знания, умения обучающихся нужно в той логической последовательности, в какой проводится их изучение.

Качество усвоения студентами подлежащего изучению материала, приобретенного (усвоенного) ими опыта и, следовательно, деятельности, которую они могут осуществлять в результате обучения, может характеризоваться уровнями усвоения (деятельности).

Напомним их.

1-й уровень — уровень представления (знакомства). Студент, выведенный на этот уровень, способен узнавать объекты и процессы, если они представлены ему сами (в материальном виде) или даны их описание, изображение, характеристика. На этом уровне студент обладает знанием-знакомством и способен опознать, различить и соотнести эти объекты и процессы.

2-й уровень — уровень воспроизведения. Студент может воспроизвести (повторить) информацию, операции, действия, решить типовые задачи, рассмотренные при обучении.

Он обладает знанием-копией.

3-й уровень – уровень умений и навыков. На этом уровне усвоения студент умеет выполнять действия, общая методика и последовательность (алгоритм) которых изучены на занятиях, но содержание и условия их выполнения новые. Здесь различают две разновидности усвоения: умение, когда студент выполняет действия после довольно продолжительного предварительного продумывания последовательности и способов их осуществления, навык, когда действие выполняется автоматически. Обдумывание каждой предстоящей операции резко "свернуто" во времени. Создается впечатление, что исполнитель работает "не думая".

4-й уровень – уровень творчества. Как известно, творчеством считают проявление продуктивной активности человеческого сознания. Например, рационализаторство и изобретательство, работа по реконструкции в ходе реального курсового проектирования, при участии в научно-исследовательской работе. Чтобы вывести студента на уровень творчества, недостаточно, чтобы он овладел знаниями, умениями и навыками по определенному, пусть даже весьма широкому набору учебных элементов. Необходимо обучить его умению самостоятельно "добывать" необходимые знания и умения. Нужно пробудить и развить в нем творческие склонности. А это возможно только при условии, что в процессе обучения будут применяться специальные творческие задачи научноисследовательской, проектной, конструкторской, технологической деятельности, т.е.

будут реализовываться мотивационные знания.

Для достижения любого уровня усвоения студент должен осуществить учебную деятельность (УД), состоящую из трех видов действий: ориентировочной основы действия (ООД), исполнительских действий (ИД) и контрольных действий (КД), выполняемых студентами обычно с помощью преподавателя:

Здесь ООД заключается в получении студентами необходимой информации, осознании поставленной перед ними задачи усвоения. С помощью полученных от преподавателя инструктажа и ориентировки они выбирают пути, средства и методы (выбирают программу) ее решения; ИД состоят в интеллектуальной переработке полученной информации и выполнении упражнений с целью усвоения знаний, умений и навыков. Студент выполняет программу, разработанную в ходе ООД; КД – действия, с помощью которых проверяются полнота, правильность и качество выполнения ООД и ИД.

Приведенные выше характеристики контроля качества знаний и умений весьма условны. Качество обучения, по С.И.Архангельскому [4], рассматривается как способность студентов выполнять определенные требования, поставленные перед ними, с учетом целей и задач изучения того или иного предмета.

Лекция 2. История развития системы тестирования 1. Возникновение тестирования. Деление тестов на педагогические и психологические.

2. Современное развитие тестологии в Европе, Японии, Канаде, США.

Современная теория тестов (IRT). История ее создания.

3. Развитие тестирования в России. Начало развития тестирования в рамках педологии. Период игнорирования тестов. Использование тестов в 70-е годы ХХ в.

Современные центры тестирования.

Деление тестов на педагогические и психологические.

Для успешной разработки педагогических заданий в тестовой форме полезно знать основы той науки, которая занимается изучением тестов. Тестология появилась на стыке психологии, социологии, педагогики и других, так называемых поведенческих наук, и призвана заниматься вопросами разработки тестов для объективного контроля знаний, умений, навыков и представлений.

Впервые тест возник как метод изучения индивидуальных различий.

Временем его возникновения считается конец XIX – начало XX веков, когда для определения физических, физиологических и психических особенностей человека психологи попытались применить различные способы измерения.

Быстрое развитие естествознания способствовало проникновению точных измерительных методов в такие «неточные» сферы, как психология и педагогика, что, в свою очередь повлекло за собой возникновение и распространение теорий, объяснявших процесс развития человека как изменяющийся и усложняющийся во времени. Первым ученым, попытавшимся измерить различия между людьми в области элементарных психических процессов, был англичанин Френсис Гальтон (F. Gallon; 1882–1911).

Проводя исследования индивидуальных различий, Ф. Гальтон использовал набор методик на определение зрительной, слуховой, тактильной чувствительности, на мускульную силу и другие характеристики.

Ф. Гальтон называл испытания, проводившиеся в его лаборатории, умственными тестами. Важным вкладом Ф. Гальтона в развитие теории тестов было определение трех основных принципов:

1. Применение серии одинаковых испытаний к большому количеству испытуемых.

2. Статистическая обработка результатов.

3. Выделение эталонов оценки.

Эти принципы используются и по сей день – на основе проведения серий испытаний получаются различного вида нормы для оценки результатов тестирования, все современные тесты построены на основе статистической теории измерений, а идея эталона оценки лежит в основе определения тестов как стандартизированного инструмента.

Термин «умственный тест» приобрел наибольшую популярность после выхода статьи Джеймса Мак-Кина Кеттелла (Cattell J. Мс-К.; 1860–1944) «Умственные тесты и измерения», опубликованной в 1890 году с послесловием Ф. Гальтона. Горячий сторонник и пропагандист тестового метода, Дж. Кеттелл считал тест средством для проведения научного эксперимента с соответствующими требованиями к чистоте научного эксперимента. Все эти идеи, выдвинутые Дж. Кеттеллом, в настоящее время составляют основу для современной тестологии. Одинаковость условий для всех испытуемых, одинаковые инструкции и четкое их понимание испытуемыми – фундаментальные принципы, положенные в основу стандартизации процедуры проведения тестирования. Ограничение времени, в настоящее время, после дополнительных исследований, реализуется в зависимости от возраста испытуемых и особенностей применяемого инструментария. Идеи статистической обработки результатов реализованы в достаточно сложных методах статистического анализа и моделирования. В 1895–96 годы в США были созданы два национальных комитета, призванных объединить усилия тестологов и придать общее направление появлявшимся тестологическим работам.

Большой вклад в развитие тестологии внес видный французский психолог Альфред Бине (Binet A.; 1857–1911). А. Бине может считаться родоначальником современных тестов, предназначенных для диагностики уровня развития интеллекта. А. Бине ввел в обиход понятие умственного уровня (позднее замененного на умственный возраст, а еще позже на показатель умственного развития IQ).

Длительное время к тестам относились как к инструменту для индивидуальных измерений индивидуумов. Массовый характер тестирования вызвал необходимость перейти от индивидуальных тестов к групповым. В 1917–18 годы в США появились первые групповые тесты для нужд армии. Наибольшее применение нашли тесты Артура Синтона Отиса (Otis A.S.; 1866–1963). Им были предложены два набора тестов (Альфа- и Бета-тесты): для владеющих английским языком и «немые» тесты для не владеющих или плохо владеющих языком.

Основные принципы, использованные при составлении этих тестов, были систематизированы и впоследствии легли в основу всей методологии групповых тестов.

Одновременно широко развивались методики обработки результатов тестирования, создания тестовых систем. Ф. Гальтон первый разработал метод статистического сравнения двух рядов переменных и ввел индекс совместного отношения, названный коэффициентом корреляции. Также Ф. Гальтону принадлежит заслуга изучения взаимосвязи переменных и построения линий регрессии одной переменной на другую. В 1896 году Карл Пирсон (Pearson К.;

1857–1936) изложил основы теории корреляции. А в 1904 году Чарльз Эдвард Спирмен (Spearman Ch. E.; 1863–1945) показал, что корреляция между двумя переменными свидетельствует о наличии общего фактора (причины, определяющей величины этих переменных) и специфических факторов, присущих каждой переменной. Ч. Спирмен явился основателем двухфакторной теории.

Луис Левон Терстоун (Thurstone L.L; 1887–1955) развил далее идею факторного анализа, исходя из понимания интеллекта как целого, состоящего из нескольких первичных способностей (вербальной, перцептивной, способности к восприятию пространства, памяти, беглой речи). Все эти факторы равноправны, не существует единого фактора интеллекта. С помощью факторного анализа не просто устанавливается связь изменения одной переменной с изменением другой, а должна определяться мера этой связи, и найдены основные причины, лежащие в основе указанных изменений. Достижения корреляционного и факторного анализа находят свое применение и в современных исследованиях.

С начала ХХ века определилось и педагогическое направление в развитии тестологии. Американец В.А. Макколл разделил тесты на педагогические (Educatinal Test) и психологические – по определению уровня умственного развития (Intelligence Test). Основной задачей педагогических тестов являлось измерение успешности обучения обучающихся по тем или иным дисциплинам за определенный период обучения, а также успешность применения определенных методов и технологии преподавания.

Целью использования педагогических тестов, по мнению В. Макколла, является объединение в группы обучающихся, усваивающих равный по объему материал и усваивающих материал с одинаковой скоростью.

Разработка первого педагогического теста принадлежит американскому психологу Эдуарду Ли Торндайку. Он считается основоположником педагогических измерений. Результатом большой исследовательской работы в области измерений и использования метода тестов в педагогике явилась книга «Введение в теорию психологии и социальных измерений» (1904). Первый стандартизованный тест, вышедший под руководством Э. Торндайка был тест Стоуна на решение арифметических задач, впервые снабженный «нормами».

В 1915 году Йеркс создал свою серию тестов, главное отличие которой – изменение системы подсчета. Вместо возрастных долей, предложенных А. Бине, испытуемый получает за каждый правильно решенный тест известное количество баллов. Это повысило удобство проведения и подсчета результата теста. Количество полученных баллов переводилось по приложенным стандартам в коэффициент одаренности или успешности.

2. Современное развитие тестологии. Развитие тестирования в России.

Группа американских психологов работает над созданием «интеллектуальных»

тестов для обучения. Эти тесты назывались «национальными тестами».

Национальные тесты впервые были составлены в 2 сериях по 2 варианта в каждой серии. Совершенствуя методику, американские тестологи в этих тестах впервые перед каждым разделом теста дают примерные упражнения.

Разработкой и проверкой тестов занимаются специальные государственные службы. Еще в 1900 году в США был создан Совет по вступительным экзаменам. В 1926 году – Совет колледжей принял тест SAT, были разработаны «тесты для квалификационной и профессиональной оценки деятельности педагога». С года существует Служба тестирования (Educatinal Testing Service), которая считается наиболее представительным научно-исследовательским центром.

К 1961 году только в США были созданы 2126 стандартизированных тестов.

Здесь существует множество тестовых издательств, общая продукция которых представляет несколько тысяч различных тестов. Естественно, они различаются по качеству и по спросу на них. Изданные тесты ежегодно аннотируются и наиболее значительные комментируются в ежегоднике «Mental Measurement Yearbook».

Интеграционные процессы, характеризующие современную цивилизацию, дали толчок развитию новых направлений тестирования. Оценка качества образования приобретает все большую значимость по мере увеличения количества стран, осознающих преимущества сопоставления собственных достижений с международным контекстом.

С 1959 года основные крупномасштабные международные исследования проводятся под руководством неправительственной организации Международная ассоциация по оценке успеваемости (ИЕА). Учреждения ИЕА созданы в более чем 45 странах мира и подключают к своей деятельности министерства образования, педагогические факультеты университетов, научно-исследовательские институты.

Исследования ИЕА строятся в определенной последовательности и базируются на объяснительных моделях, основанных на учебных программах. Предполагается обследование тысяч обучающихся в каждой стране с помощью академических тестов, составляемых на основе учебных программ и других занятий.

Используемые тесты успеваемости направлены на измерение достижений обучаемых, которые можно оценить в баллах, скорректировать и сравнить с аналогичными данными по стране, а также соотнести с другими факторами, влияющими на успеваемость (например, с содержанием обучения, технической оснащенностью школы, полом обучающихся, местностью проживания и пр.). Цель такого исследования – создание достаточно гибкой модели, позволяющей измерить комплексное воздействие школы на процесс овладения знаниями.

Помимо ИЕА существуют другие организации, занимающиеся проблемами международного тестирования. Например, Институт образования ЮНЕСКО (Гамбург), Международный центр педагогических исследований в Париже провели совместно с ИЕА исследование навыков чтения в 35 странах (1990 год). При этом определение лучшей или худшей страны в изучаемой области не является целью тестирования. Задачей исследования становится поиск наиболее эффективных условий обучения.

В России до 1917 года вопросам тестирования не уделялось достаточного внимания. Практическое значение тесты получили только после 1925 года, когда была создана особая тестовая комиссия. Тестовая комиссия существовала при педагогическом отделе Института методов школьной работы. В ее задачи входила разработка стандартизированных тестов для советской школы. И уже в 1926 году были разработаны тесты по некоторым предметам: природоведению, обществоведению, счету, решению задач, знанию географической карты, на понимание чтения и правописание, созданные на основе американских. К этим тестам прилагались инструкции и личная карточка для учета прогресса учащегося.

Проблемой разработки тестов вплотную занимались видные российские психологи и педагоги: С.Г. Геллерштейн, П.П. Блонский, А.П. Болтунов, М.С.

Бернштейн, A.M. Шуберт, Г.И. Залкинд и др. В 1927 году вышла книга С.М.

Василейского «Введение в теорию и технику психологического, педологического и психотехнического исследования», где излагались теоретические и практические подходы к созданию и использованию тестов.

В 20-е годы Центральная педологическая лаборатория MОHO под руководством педолога Е. Гурьянова разработала и выпустила в свет несколько тестов:

1. Шкала для измерения умственного развития испытуемых.

2. Тесты для учета навыков в чтении, счете и письме.

3. Тесты коллективного испытания умственной одаренности.

Под руководством П.П. Блонского в педагогическом кабинете Академии коммунистического воспитания осуществлялась проверка шкалы Бине-Симона, создание тестов и построение собственных стандартов. В Ленинградском научнопедагогическом институте им. А.И.Герцена и Детском обследовательском институте им. А.С. Грибоедова разрабатывались тесты на одаренность для массовых обследований испытуемых нормальных школ.

Однако вскоре положение кардинально изменилось. Вышедшее в 1936 году постановление ЦК ВКП(б) «О педологических извращениях в системе Наркомпросов» негативно сказалось на развитии педологии в целом и тестологии в частности. Метод тестов был признан буржуазным орудием для дискриминации обучающихся и «изгнан» из советской школы. Одной из причин негативного отношения к тестам того времени было отсутствие заинтересованности системы управления в объективных результатах обследований педологов.

В настоящее время в нашей стране появилось несколько центров, в которых достаточно профессионально занимаются работой с тестовыми методиками. Среди наиболее активных следует назвать: Центр тестирования профессионального образования (ЦТПО, г. Москва), Центр оценки качества образования Института общего среднего образования РАО, Центр тестирования выпускников общеобразовательных учреждений Российской Федерации, Центр психологического и профессионального тестирования МГУ, Лаборатория аттестационных технологий Московского института повышения квалификации работников образования (МИПКРО), Лаборатория изучения образовательных систем Центра развития образования (г. Санкт-Петербург), Центр аттестации областного института повышения квалификации и переподготовки педагогических кадров (г. Вологда), Научно-информационный центр государственной аккредитации Минобразования России (г. Йошкар-Ола), Исследовательский центр проблем качества подготовки специалистов, Центр аттестации Института развития регионального образования (г. Екатеринбург) и целый ряд других.

Завершая обзор становления и развития тестирования, хочется подчеркнуть важность и педагогическую ценность этого метода, дающего возможность статистически точно анализировать процесс получения образования, искоренять недочеты и видеть дальнейшие перспективы его развития. Критическое отношение к тестированию, понимание его возможностей позволит педагогу адекватно использовать тесты для улучшения педагогического процесса.

Лекция 3. Психолого-педагогические аспекты тестирования 1. Роль психологической подготовки к тестированию.

2. Тестирование и мотивация.

3. Тестирование и личностно-психологические, национальные особенности тестируемых.

1. Роль психологической подготовки к тестированию Введение в контекст обучения новой формы контроля – тестирования, приводит к изменению прежде всего восприятия и установок контроля, меняется вся обстановка, в том числе психологическая ситуация, связанная с формированием у участников тестирования положительного отношения к ним, с приятием, одобрением или неприятием, отторжением тестов как формы контроля.

Среди педагогов много таких, которые уже в течение ряда лет используют тестовые методы в обучении и в контроле. Но есть педагоги, которые опасаются открытых процедур.

Интересные данные об оценке учащимися методов традиционного и тестового контроля были получены Н.Ф.Ефремовой в ходе диагностического исследования такого рода предпочтений (опрошено около 500 респондентов).

Наибольшим баллом при этом респондентами-участниками теста была оценена объективность процедуры тестирования и независимость оценки от мнения педагога, а также постулат неразглашение оценок. В качестве преимуществ контроля традиционными методами были отмечены:

возможность подсказки, более низкий, уровень трудностей задании. Вместе с тем ни один из респондентов не удостоил традиционный контроль такими качествами, как объективность, глубина и полнота проверки (Современные тестовые технологии в образовании, 2003, с.133).

Под мотивацией в педагогике понимается система целей, потребностей, мотивов, побуждающих индивида сознательно относиться к учению и к контролю как его составной части, быть активным в учебно-познавательной работе и т.д. Мотивация выполняет не только побуждающую, но и направляющую, организующую, смыслообразующую функции. В нашем случае – при тестировании – мотивация служит одним из основных психологических факторов успешности контроля.

Как известно, на уровень мотивации учебно-познавательной деятельности влияют объективные факторы (статус, история изучаемого предмета и т.д.) и субъективные (жизненные планы человека, стремление к самореализации и т.д.), а также внешние мотивы (желание иметь хорошие оценки и др.).

Не будет преувеличения сказать, что процесс побуждения человека к тестированию нередко оказывается сложным социально-психологическим, интеллектуальным, эмоциональным и волевым актом анализа и оценки альтернатив, выбора и принятием решения. Этот процесс психологически осложняется тем, что далеко не всегда реальные мотивы осознаются субъектом актуально, (например, так называемая инструментальная мотивационная основа связана с потребностью проверить уровень владения русским языком для выполнения профессионально-деловых, учебнообразовательных обязанностей.) т.е. при подготовке и выполнении тестирования. Есть мотивы скрытые, могут быть материальные, семейные, туристические мотивы и т.д.).

Результаты теста, несомненно, зависят от привычности и искушенности испытуемых. Понятно, что человек, имеющий опыт выполнения тестов, обладает преимуществом перед теми, кто впервые участвует в тестировании.

Отчасти эти преимущества складываются из преодоленного чувства неизвестности, развившейся уверенности в себе, в своих возможностях.

Чувство напряженности, тревожности, сомнения в удачном исходе экзамена снимают разного рода предтестовые тренинги. Они помогают механизмам памяти, речи настраиваться на работу в жестко лимитированном по времени экзамене. Американский специалист в области тестологии, психолог Анна Анастази считает, что у человека, искушенного в работе заданиями тестового формата, показатели на 11% выше, чем у «неискушенных» испытуемых (Анастази А., 1982, с. 48).

Желательно, чтобы группа тестируемых (в том случае, если можно объединить участников процедуры) была выравнена по опыту прохождения теста.

Были выделены два важных компонента тревожности – эмоционального и озабоченного. Эмоциональная составляющая тестовой тревожности охватывает чувства, физиологические реакции, такие как напряжение.

Озабоченность связана с негативными мыслями, с ожиданием неудачи при выполнении теста и с озабоченностью последствиями неуспеха. Эти мысли отвлекают внимание от выполнения заданий теста. Зарубежные психологи разработали в этой связи методики поведенческой терапии (G.S.Tryon, 1980).

Вместе с тем, тестовая тревожность, как оказалось, способна убывать – и без «терапевтического вмешательства» – с каждым последующим тестированием (Анастаре А., Урбина С., 2001, с. 37,38).

Тестовая тревожность, тем не менее, – комплексный феномен, вызываемый множеством разнородных причин, специфических для конкретного человека. Однако, к числу причин, позволяющих преодолевать тревожность, относятся, кроме вышеназванных, совершенствование языковых, коммуникативно-речевых навыков и умений.

Немаловажны и руководства к тестам, которые могут предоставлять пользователю информацию о процедуре проведения тестирования, подсчете показателей, оценивающих качество выполнения теста.

3. Тестирование и личностно-психологические, Исследователями в области психологии (см. Немов Р.С., 1994) установлено, что только около 40% людей в возрасте до 23 лет обладают зрительно-образной памятью. Она помогает запоминать материал через смысловую группировку, через его соотнесение с ранее известным.

Большинство же людей нуждается в осмыслении материала, к примеру, в его повторном чтении. В результате «развивается» дефицит времени, растет чувство напряженности во время экзамена, снижается сосредоточенность.

Кроме того (и это обнаруживает тестирование), не все учащиеся обладают способностью к моментальному вводу информации (психологи именую это состояние «ретроградной амнезией»). Сдающему устный экзамен бывает нужно «разговориться» - «внутренне» или «внешне». Это так называемый этап «врабатывания», который следует учитывать при планировании временных рамок тестирования. Как правило, после фазы «врабатывания»

наступает этап устойчивой работоспособности, который при соблюдении условий тестирования (при отсутствии помех, шума, в атмосфере доброжелательности) может длиться до трех и более часов. Затем возможен этап снижения работоспособности, нередко завершающийся состоянием «конечного порыва», когда мобилизуются дополнительные силы через волевую установку, обязывающую закончить экзаменационную работу с самоотдачей. Волнообразный характер деятельности несложно учесть при комплектовании блоков тестовых заданий. Желательно не только располагать их в последовательности, но и устранять однообразные целевые установки типа «Выберите правильный вариант ответа». Экзаменующийся может мобилизовать внимание, силы, способности, если ему на помощь «придет» удачная словесная инструкция или средство, регулирующее внимание и настроение (знаки, символы, призывы), разнообразные формы предъявления стимула задания (вербальный тест может сменяться сюжетными картинками, видеорядом, аудиозаписью).

Лекция 4. Педагогические тесты. Термины и определения 1. Педагогический контроль. Функции, формы и принципы контроля.

2. Понятийный аппарат тестологии.

3. Валидность, надёжность, объективность теста. Гомогенность и гетерогенность.

4. Адаптивное тестирование.

1. Педагогический контроль. Функции, формы и принципы контроля.

Известно, что контроль стимулирует обучение и влияет на поведение студентов.

Как показала практика, попытки исключить контроль частично или полностью из учебного процесса приводят к снижению качества обучения. Внедряемые в настоящее время интенсивные методы обучения ведут неизбежно к новым поискам в области повышения качества и эффективности педагогического контроля и появлению его новых форм, например, таких как рейтинг.

В области контроля можно выделить три основные взаимосвязанные функции:

диагностическую, обучающую и воспитательную.

Диагностическая функция: контроль – это процесс выявления уровня знаний, умений, навыков, оценка реального поведения студентов.

Обучающая функция контроля проявляется в активизации работы по усвоению учебного материала.

Воспитательная функция: наличие системы контроля дисциплинирует, организует и направляет деятельность студентов, помогает выявить пробелы в знаниях, особенности личности, устранить эти пробелы, формирует творческое отношение к предмету и стремление развить свои способности.

В учебно-воспитательном процессе все три функции тесно взаимосвязаны и переплетены, но есть и формы контроля, когда одна, ведущая функция превалирует над остальными. Так, на семинаре в основном проявляется обучающая функция:

высказываются различные суждения, задаются наводящие вопросы, обсуждаются ошибки, но вместе с тем семинар выполняет диагностическую и воспитывающую функции.

Зачеты, экзамены, коллоквиумы, тестирование выполняют преимущественно диагностическую функцию контроля.

При применении программированного контроля проявляется его обучающая и контролирующая функции.

Формы педагогического контроля.

Систему контроля образуют экзамены, зачеты, устный опрос (собеседование), письменные контрольные, рефераты, коллоквиумы, семинары, курсовые, лабораторные контрольные работы, проектные работы, дневниковые записи, журналы наблюдений. Каждая из форм имеет свои особенности.

Во время устного опроса контролируются не только знания, но тренируется устная речь, развивается педагогическое общение. Письменные работы позволяют документально установить уровень знания материала, но требуют от преподавателя больших затрат времени. Экзамены создают дополнительную нагрузку на психику студента. Курсовые и дипломные работы способствуют формированию творческой личности будущего специалиста. Умелое сочетание разных видов контроля показатель уровня постановки учебного процесса в вузе и один из важных показателей педагогической квалификации преподавателя.

По времени педагогический контроль делится на текущий, тематический, рубежный, итоговый, заключительный.

В российской высшей школе выделяют три основных принципа контроля.

Воспитывающий принцип проявляется в том, что активизирует творческое и сознательное отношение студентов к учебе, стимулирует рост познавательных потребностей, интересов, организует учебную деятельность и воспитательную работу.

Всякий контроль, принижающий личность студента, не может применяться в вузе.

Систематичность. Систематический контроль упорядочивает процесс обучения, стимулирует мотивацию, дает возможность получить достаточное количество оценок, по которым можно более объективно судить об итогах учебы.

Всесторонность. Круг вопросов, подлежащих контролю и оцениванию, должен быть широк настолько, чтобы охватить все основные темы и разделы предмета.

При оценке личности следует учитывать деловые, моральные качества, ценностные ориентации, общественную работу, учебные достижения. Всесторонность контроля – одна из составляющих комплексного подхода к воспитанию.

Ядро научного аппарата науки о тестах образуют понятия.

Адаптивное (последовательное) тестирование - вид компьютерного тестирования, при котором тестовые задания с известными характеристиками последовательно изображаются на экране компьютера, а уровень подготовленности испытуемого со все возрастающей точностью оценивается сразу же после каждого его ответа. Очередное задание в зависимости от ранее данных ответов испытуемых подбирается так, чтобы его уровень трудности позволял наилучшим образом оценить уровень подготовленности тестируемого. Количество заданий теста заранее не фиксируется, а процесс тестирования заканчивается по достижении заданной точности оценки уровня подготовленности испытуемого.

Апробация теста - предварительное тестирование стратифицированной выборки испытуемых для определения соответствия теста его целям и априорным характеристикам. Апробация есть необходимый этап для создаваемого теста перед его широким использованием.

Ассоциации в тестовом задании - словесная подсказка в содержании задания, позволяющая тестируемому угадать правильный ответ; свидетельство некорректности задания.

Балл - условная единица для оценки по определенной шкале результатов выполнения теста или его задания.

Балл истинный - латентный объект измерений, представляющий собой тот балл по определенной шкале, которому объективно соответствует уровень подготовленности данного испытуемого при указанной методике оценивания (при этом ошибки измерений условно предполагаются отсутствующими).

Балл категории ответа на тестовое задание - балл, соответствующий определенной категории ответа на политомическое задание в зависимости от уровня полноты того ответа (например, категория ответа на уровне узнавания - один балл, на уровне репродукции - два балла, на уровне оперативного применения - 3 балла и т.д.).

Балл критериальный - граничное значение тестового балла, с помощью которого заданная выборка тестируемых разделяется на выполнивших данный тест удовлетворительно ("зачет") и неудовлетворительно ("незачет").

тестирования, верно выполнивших данное задание; дополнение до общего количества испытуемых, выполнявших задание, отражает некоторую меру трудности задания для данного контингента участников.

Балл первичный испытуемого - сумма баллов, приписанных тем категориям ответов на тестовые задания, которые испытуемый указал в качестве правильных. Для тестов, состоящих из дихотомических заданий -количество верно выполненных заданий, что отражает некоторую меру подготовленности данного испытуемого относительно данного теста.

Балл первичный категории задания - количество участников тестирования, указавших данную категорию ответа для определенного задания в качестве правильного ответа; в случае дихотомического задания совпадает с первичным баллом этого задания.

Балл тестовый - окончательное количественное выражение по определенной шкале индивидуальной оценки уровня подготовленности тестируемого, полученное на основании стандартизованной обработки результатов выполнения испытуемым тестовых заданий.

Банк тестовых материалов - совокупность систематизированных тестовых заданий и тестов, разработанных различными авторами, для различных целей, прошедших апробацию и имеющих известные характеристики.

Бланк ответа - стандартный бланк для записи ответов на предложенные в тесте задания; тестируемый отмечает или записывает номера выбранных ответов или сами ответы в определенные позиции бланка.

Валидизация - процедура улучшения валидности теста по результатам оценки валидности критериальной.

Валидность теста критериальная - характеристика теста, отражающая показатель соответствия диагноза и прогноза теста определенным внешним критериям, характеризующим объект измерения.

критериальной. Отражает эффективность прогноза теста о возможностях испытуемых в будущем.

Валидность теста содержательная - характеристика теста, выражающая показатель охвата заданиями теста той области знания, подготовленность в которой этот тест оценивает.

Валидность сопоставительная (текущая) - частный случай валидности критериальной. Отражает соответствие текущего диагноза теста результатам другого измерения того же объекта.

Валидность теста - комплексная характеристика теста, отражающая его способность измерять именно то, для чего он предназначен. Характеризует возможности генеральной совокупности заданий в тестируемой области знаний несмещенно оценить объект измерений теста.

Валидность теста факторная - характеристика теста, выражающая корреляцию между данным тестом и каждым из выбранных факторов контроля знаний, умений и навыков.

Варианты теста - набор неидентичных тестов, созданных по единой спецификации и имеющих одинаковую структуру.

Время тестирования - интервал времени, отводимого на выполнение теста.

Выравнивание вариантов теста - определенный метод решения комплекса вопросов, связанных с отображением на определенной шкале латентных характеристик всех тестовых заданий (в том числе, составляющих его различные варианты).

Генеральная совокупность тестовых заданий - гипотетическое множество тестовых заданий, связанных общей целью и теоретически полностью отражающих определенную область знаний.

Дистрактор (отвлекающий ответ) - вариант ответа на тестовое, задание закрытого типа, похожий на правильный, но не являющийся таковым.

Дихотомическое (альтернативное) тестовое задание - задание, выполнение которого оценивается только альтернативно : выполнено верно (обычно символизируется единицей) или выполнено неверно (обычно символизируется нулем).

Длина теста - количество тестовых заданий теста.

сопровождается несколькими номерованными вариантами ответа; испытуемому предлагается выбрать номер правильного ответа.

Задание открытого типа - тестовое задание без указания возможных вариантов ответа; испытуемому предлагается самостоятельно указать правильный ответ.

Задания узловые - тестовые задания, общие для всех или нескольких вариантов одного и того же теста. Используются для выравнивания результатов тестирования с использованием различных вариантов тестов.

Инструкция о проведении тестирования - документ, устанавливающий порядок и организацию тестирования, которые определяются используемой методикой, техническими и организационными средствами и запланированными способами обработки.

Инструкция тестового задания - словесные указания, испытуемому, связанные с выполнением тестового задания (выбором правильного ответа из нескольких вариантов; решением математической задачи и т.п.). Указывается способ записи правильного ответа (что, каким образом и где надо отметить, вписать и т.д.).

Инструкция может быть единой для нескольких заданий теста, если эти задания однотипны по действиям.

Ключ тестового задания - правильный ответ для тестового задания.

Коэффициент дискриминации (дифференцирующая способность) тестового задания - количественная характеристика способности тестового задания дифференцировать испытуемых по уровню их подготовленности. Изменяется от -1 до +1.

Логит - единица измерения уровней подготовленности участников тестирования и трудностей тестовых заданий в рамках логистических моделей тестирования. Если разность между упомянутыми двумя понятиями составляет 1 логит, то вероятность верного выполнения таким испытуемым такого задания равна 0,73.

Матрица ответов - прямоугольная таблица, в каждой позиции которой указываются ответы участника тестирования. Обычно номер строки соответствует номеру испытуемого, а номер столбца соответствует номеру задания теста.

Метод Кронбаха - обобщение метода Кьюдера-Ричардсона на случай, когда задания теста не являются дихотомическими.

Метод Кьюдера—Ричардсона - оценка надежности теста, основанная на вычислении по одноименной формуле среднего значения коэффициента надежности, оцененного методом Рюлона при всевозможных расщеплениях теста на две половины;

при этом задания теста предполагаются дихотомическими, а само расщепление практически не требуется.

Метод расщепления - оценка надежности теста, основанная на сопоставлении результатов тестирования по двум или нескольким эквивалентным частям теста.

Метод Рюлона - метод оценивания числителя отношения, определяющего коэффициент надежности, по разностям результатов тестирования испытуемых по двум эквивалентным половинам одного и того же теста.

Модель двухпараметрическая - логистическая модель, в которой функция успеха зависит от разности между уровнем подготовленности тестируемого и уровнем трудности тестового задания и от коэффициента дискриминации тестового задания.

Модель однопараметрическая - логистическая модель, в которой функция успеха зависит только от разности между уровнем подготовленности тестируемого и уровнем трудности тестового задания.

Модель тестирования - одна или несколько функциональных зависимостей, гипотетически связывающих подлежащие определению характеристики ( параметры ) участников тестирования и тестовых заданий с такими величинами, которые реально проявляются в результате выполнения соответствующего теста (например, с вероятностью правильного выполнения испытуемым определенного уровня подготовленности тестового задания определенной трудности).

Модель частичного оценивания - обобщение логистических моделей для политомических тестовых заданий, позволяющее дополнить альтернативное оценивание заданий (выполнено верно, выполнено неверно) оцениванием частично правильного ответа. Определяется количеством категорий ответа, их оценками и видом соответствующих функций успеха.

Модератор - комплексная характеристика контингента испытуемых (возраст, пол, регион и т. п.).

Надежности коэффициент - количественная характеристика надежности, изменяющаяся от 0 до 1; показывает, в какой мере результаты тестирования можно считать реальными, а в какой приписывать влиянию случайных ошибок. Представляет собой отношение дисперсии измеряемого объекта в выборке (обычно истинного балла) к реально полученной полной дисперсии с учетом неизбежных ошибок измерений (обычно тестового балла).

Надежность теста - показатель точности и устойчивости результатов измерения с помощью теста при его многократном применении. Характеризует степень адекватности отражения тестом соответствующей генеральной совокупности заданий.

содержащая представителей всех наиболее значимых страт, реально существующих в генеральной совокупности потенциальных испытуемых, причем в той же пропорции.

Параллельные варианты теста - варианты теста, имеющие одинаковые характеристики.

применяющая методы и средства измерений и оценки результатов учебной деятельности испытуемых.

План теста - таблица, в которой каждое тестовое задание соотносится с определенным элементом содержания учебного предмета, конкретным видом знаний или умений, позволяющим объективно судить об уровне подготовленности испытуемых. Указывается также планируемое время выполнения каждого тестового задания и всего теста в целом.

Политомическое тестовое задание - задание, выполнение которого допускает несколько категорий ответа, каждая из которых оценивается по-разному (например, полностью верный ответ - 2 балла, частично верный ответ - 1 балл, неверный ответ - баллов).

Пользователь теста - юридическое или физическое лицо, использующее тест или результаты тестирования для оценки уровня подготовленности испытуемых в определенной области.

Предтест (предварительный, пилотный тест)- педагогический тест, априорно соответствующий спецификации, но подлежащий апробации и, возможно, последующей коррекции.

Протокол результатов тестирования - официальный документ о результатах тестирования определенного контингента испытуемых с указанием тестового балла для каждого участника тестирования.

Разрешающая способность теста (РСТ) - длина промежутка на шкале уровня подготовленности испытуемых, соответствующая изменению первичного балла участника тестирования на единицу.

Ретестовый метод - оценка надежности теста, основанная на повторном, желательно многократном его использовании при приближенно одинаковых условиях.

Надежность теста характеризуется степенью соответствия полученных результатов друг другу.

Сертификат результатов тестирования - индивидуальный официальный документ государственного образца о результате централизованного педагогического тестирования определенного лица с указанием полученного тестового балла.

Ситуативные переменные - совокупность случайных факторов, влияющих на результаты тестирования (например, место и время проведения тестирования, особенности поведения тестирующего лица, волнение испытуемого и т.д.).

Спецификация теста - документ, в котором содержится информация о целях, задачах, плане и структуре теста, а также указаны основные требования к правилам проведения тестирования, обработки результатов тестирования и их интерпретации.

Стратификация - описание структуры определенного множества объектов (например, генеральной совокупности потенциальных участников тестирования), расслоение его на страты.

Страты - определенные слои в некотором множестве объектов, например, в генеральной совокупности потенциальных участников тестирования. Характеризуются различными программами обучения, региональным представительством, бытовыми условиями и т.п.

Структура теста - совокупность сведений о числе и типе тестовых заданий по каждому элементу содержания учебного предмета и по каждому виду знаний или умений, позволяющих объективно судить об уровне подготовленности испытуемых.

Указывается также предполагаемый уровень трудности каждого тестового задания и, по возможности, его коэффициент дискриминации.

Субтест - определенное подмножество тестовых заданий некоторого теста, допускающее независимую обработку результатов тестирования и позволяющее, таким образом, решать специфические частные задачи тестирования. Тест может содержать несколько субтестов, возможно перекрывающихся.

Теория моделирования и параметризации педагогических тестов (ТППТ) теоретическая основа педагогических измерений, позволяющая ввести метрику шкалы, по которой фиксируются результаты тестирования. Основные задачи :

разработка моделей тестирования; проверка адекватности различных предположений тестирования реальной действительности; измерение характеристик тестовых заданий и участников тестирования в виде оценки параметров модели; шкалирование результатов тестирования и оценивание их точности.

Тест аппаратурный - тест с использованием технических устройств для изучения внимания, восприятия, памяти и т.д.

Тест гетерогенный - педагогический тест, проверяющий уровень подготовленности по нескольким родственным дисциплинам.

подготовленности по конкретной дисциплине.

Тест достижений - тест, предназначенный для определения степени освоения испытуемым определенной области знаний или умений.

предназначенного для абсолютного тестирования, позволяющий оценить, преодолел ли испытуемый определенный порог усвоения учебного материала рассматриваемый учебной программы или ее части. При этом результаты тестирования сравниваются с некоторым критерием уровня подготовленности.

Тест мономорфный - тест, объединяющий задания одного типа (например, задания закрытого типа).

Тест мощности (тест на сложность) - тест, состоящий из заданий возрастающей трудности. Время выполнения лимитируется мягко. Оценивается в зависимости от уровня трудности верно выполненных заданий.

Тест нормативно-ориентированный - частный случай относительного теста, позволяющий сравнивать учебные достижения (уровень подготовленности) отдельных испытуемых друг с другом или относительно предварительно полученных тестовых норм.

Тест обучающий - педагогический тест, включающий актуальный учебный материал, предназначенный для формирования у обучаемого определенного уровня знаний, навыков, умений и позволяющий осуществлять самоконтроль усвоения материала.

Тест педагогический - совокупность тестовых заданий, позволяющая по результатам их выполнения объективно измерить уровень подготовленности испытуемых по конкретным разделам определенной области знания. Тест педагогический представляет собой конечную репрезентативную выборку из генеральной совокупности калиброванных тестовых заданий.

Тест полиморфный - тест, в котором присутствуют задания различных типов.

Тест репетиционный - тест, позволяющий проверить степень готовности испытуемого к педагогическому тестированию, знакомящий с порядком работы, объемом и сложностью заданий и т.п.

Тест скорости - тест, состоящий из заданий приближенно одинаковой трудности, оценка по которому определяется количеством выполненных заданий в строго ограниченное время.

Тест смешанный - тест, содержащий черты теста скорости и теста мощности.

Наиболее распространен при оценке учебных достижений испытуемых.

Тест стандартизованный - педагогический тест, имеющий спецификацию и определенные характеристики, стабильно подтвержденные на представительной выборке испытуемых. Предназначен для многократного использования.

Тестирование абитуриентское - педагогическое тестирование с целью измерения уровня подготовленности абитуриентов ВУЗов.

Тестирование абсолютное - педагогическое тестирование, предназначенное для оценивания уровня подготовленности каждого испытуемого персонально (безотносительно к успехам других) в четко определенной области знаний.

Тестирование аттестационное - педагогическое тестирование по окончании обучения определенного уровня, как правило, основного и полного среднего образования с целью сопоставления уровня подготовленности учащихся с образовательными стандартами и аттестации испытуемых.

Тестирование компьютерное - педагогическое тестирование на компьютере под управлением специальной программы, обеспечивающей нужную презентацию тестовых заданий и обработку результатов тестирования.

Тестирование на бланках - педагогическое тестирование, при котором носителем содержания теста служит бланк определенного образца; дополняется соответствующим бланком ответов.

Тестирование относительное - педагогическое тестирование, предназначенное для сопоставления уровня подготовленности испытуемых в определенной области знаний относительно друг друга или относительно нормативной выборки.

Тестирование педагогическое - совокупность методических и организационных мероприятий, обеспечивающих разработку педагогических тестов, подготовку и проведение стандартизованной процедуры измерения уровня подготовленности испытуемых, а также обработку и анализ результатов.

Тестирование тематическое - педагогическое тестирование с целью измерения уровня подготовленности испытуемых в определенной области знаний, соответствующей законченной теме или разделу учебной дисциплины.

Тестирование централизованное - педагогическое тестирование, проводимое в разных регионах России по тестам и инструкциям, исходящим из единого центра.

Обработка результатов тестирования и шкалирование также выполняется в том же центре.

Тестируемый (испытуемый) - человек, проходящий тестирование, с целью оценки его уровня подготовленности в определенной области знаний.

Тестирующее лицо - наблюдатель, инструктор, непосредственно проводящий тестирование и обеспечивающий самостоятельную работу испытуемых в соответствии с инструкцией но проведению тестирования.

Тестовая батарея - совокупность субтестов, объединенных единой методикой использования и направленных на измерение различных сторон сложного объекта.

Тестовое задание - задание специфической формы, элемент теста, минимальная законченная составляющая единица теста.

Тестовое задание в виде логические соотношения - тестовое задание, при выполнении которого предполагается установить логические соотношения между указанными в тестовом задании понятиями.

Тестовое задание на соответствие (тестовое задание перекрестного выбора) тестовое задание, при выполнении которого необходимо установить соответствие между элементами двух множеств (двух списков).

Тестовое задание на установление правильной последовательности тестовое задание, выполнение которого состоит в установлении правильной последовательности операций, действий, событий.

Тестовое задание на установление точки зрения - задание с несколькими ответами качественного характера, среди которых нет правильных и нет неправильных; испытуемый выбирает ответ в соответствии со своей точкой зрения по сформулированному в задании вопросу, основываясь на своих склонностях, представлениях и т.п. (примером предлагаемых ответов могут быть следующие:

полностью согласен, частично согласен, безразличен, не согласен, категорически не согласен).

Тестовое задание с несколькими правильными ответами - задание, в котором правильных ответов может быть несколько.

Тестовые нормы - наиболее важные статистические характеристики распределения результатов тестирования нормативной выборки испытуемых.

Тестолог - специалист, занимающийся теоретическими и практическими вопросами тестологии.

Тестология - наука, изучающая возможности оценить различные свойства личности с помощью специально разработанных тестов и методов их интерпретации.

Трудность тестового задания (уровень трудности) - основная количественная характеристика тестового задания, не зависящая от выборки испытуемых и отраженная на определенной шкале.

Уровень подготовленности испытуемого - количественная характеристика знаний, навыков и умений участника тестирования по определенному кругу вопросов.

Условия тестирования - окружающая обстановка (готовность помещения, состояние рабочих мест, поведение тестирующих лиц) и другие факторы, оказывающие влияние на процесс тестирования.

Функция успеха для категории ответа - функциональная зависимость, указывающая вероятность выбора данной категории ответа в зависимости от близости этой категории к правильному ответу и уровня подготовленности испытуемого.

Определяет модель тестирования для политомических заданий.