На правах рукописи

СОКУРОВА Татьяна Юрьевна

ИНТЕГРАЦИЯ КОМПЬЮТЕРНОГО ДИАГНОСТИЧЕСКОГО

ТЕСТИРОВАНИЯ ПО ОРФОГРАФИИ И ПУНКТУАЦИИ

В ПРАКТИКУ ПРЕПОДАВАНИЯ РУССКОГО ЯЗЫКА

Специальность 13.00.02 – теория и методика обучения и воспитания

(русский язык, уровни общего и профессионального образования)

Автореферат диссертации на соискание ученой степени кандидата педагогических наук

МОСКВА – 2009 1

Работа выполнена на кафедре русского языка и методики его преподавания филологического факультета Российского университета дружбы народов

Научный руководитель:

доктор педагогических наук, профессор Руденко-Моргун Ольга Ивановна

Официальные оппоненты:

доктор педагогических наук, доцент Дунаева Лариса Анатольевна Московский государственный университет имени М.В. Ломоносова кандидат филологических наук, доцент Синячкин Владимир Павлович Российский университет дружбы народов

Ведущая организация:

Московский педагогический государственный университет.

Защита диссертации состоится 23 февраля 2009 года в 14.00 часов на заседании диссертационного совета Д 212.203. при Российском университете дружбы народов по адресу: 117198, г. Москва, ул. Миклухо-Маклая, 6, зал № 1.

С диссертацией можно ознакомиться в Учебно-научном информационном библиотечном центре (Научной библиотеке) РУДН.

Автореферат размещен на сайте www.rudn.ru Автореферат разослан 22 января 2009 г.

Ученый секретарь диссертационного совета кандидат педагогических наук, доцент В.Б. Куриленко

ОБЩАЯ ХАРАКТЕРИСТИКА РАБОТЫ

Актуальность и проблема исследования. Тестирование по орфографии и пунктуации – один из важных инструментов получения педагогической информации в процессе обучения русскому языку, наиболее объективный и качественный способ контроля орфографических и пунктуационных знаний, умений и навыков, являющихся основой грамотного письма. Такие характеристики данного вида контроля, как возможность создания равных для всех учащихся условий, единых критериев оценки и интерпретации достигнутых результатов, способствовали его широкому проникновению в практику преподавания русского языка в общеобразовательной и высшей школе, а в последние годы, вследствие целенаправленной государственной образовательной политики, переместили тестовые системы в разряд приоритетных педагогических инструментов.

Рассмотрение тестирования в контексте актуальных для современной школы взаимосвязанных проблем повышения качества образования и его информатизации позволяет говорить о смещении акцентов с сугубо контролирующей функции единого тестового контроля «для всех» на его скрытые вариативные диагностические и обучающие возможности.

В настоящее время общепризнанно, что в качестве современной инструментальной основы для поддержки гибкого, адаптивного, дифференцированного личностно ориентированного обучения следует рассматривать компьютерные технологии. В 2000-е годы в рамках различных программ, нацеленных на развитие всех уровней российского образования, происходила активная информатизация сферы преподавания русского языка, ежегодно пополнялся массив инновационных, электронных, разработок, поддерживающих Государственные образовательные стандарты основного и среднего (полного) общего образования. Немаловажное место в этом массиве занимают компьютерные системы обучения и контроля, в том числе контрольно-диагностические тесты.

В то же время, несмотря на наличие практических разработок в области компьютерного тестирования и обучения русскому языку, реализующих специфические возможности компьютера как гибкого, адаптивного инструмента обучения, они не находят массового применения в практике преподавания русского языка в школе и вузе. Причина заключается не только в известной традиционности педагогической среды, склонной опираться на уже известные и апробированные средства, но и в отсутствии массового опыта внедрения в практику преподавания инновационных электронных педагогических инструментов (представляющих собой по сути сложные и многофункциональные информационно-образовательные системы), а также технологических и методических описаний, предлагающих пути и способы их интеграции в текущий учебный процесс и алгоритмы эффективного использования.

Все сказанное выше определяет актуальность настоящего исследования.

Исследование направлено на верификацию следующей гипотезы:

разработанные технологии апробации и интеграции компьютерного контрольно-диагностического тестирования по орфографии и пунктуации в систему обучения русскому языку в школе и вузе будет способствовать его внедрению в учебный процесс в качестве необходимого компонента, обеспечивающего гибкость и адаптивность учебного процесса, что, в свою очередь, окажет существенное влияние на повышение практической грамотности каждого учащегося, позволит скорректировать обучение в соответствии с его индивидуальными личностными и когнитивными особенностями.

Цель исследования заключается в разработке технологий апробации и последующей интеграции в образовательную практику российских школ и вузов компьютерного контрольно-диагностического тестирования по орфографии и пунктуации как средства повышения качества подготовки российских школьников и студентов по русскому языку в рамках индивидуальной самостоятельной работы по повышению культуры письменной речи.

';

В соответствии с этой целью сформулированы следующие задачи исследования:

• всесторонне исследовать феномен педагогического тестирования как инструмента повышения качества образования: определить основные показатели и критерии качества образования, проанализировать с этой точки зрения современные модели педагогических измерителей, изучить с психолого-педагогических позиций концептуальные основы педагогического тестирования, его методологию и статистические показатели качества теста;

• с целью определения роли и места компьютерного контрольнодиагностического тестирования по орфографии и пунктуации в системе обучения русскому языку в российском школьном и высшем образовании исследовать проблемное поле программированного обучения как методологической основы и методической базы компьютерного тестирования по русскому языку (цель и психолого-педагогические основы управления учебным процессом, критерии эффективности обучения, механизмы обратной связи в обучении, пути регуляции учебного процесса и его алгоритмизации, принципы отбора и структурирования знаний и умений, подлежащих усвоению, программированные средства обучения);

систематизировать и описать принципы отбора и структурирования содержания школьного курса русского языка с целью его представления в контрольно-диагностических системах и на этой основе обобщить методологическую базу компьютерного контрольно-диагностического тестирования по русскому языку;

• на основе анализа массива существующих разработок выявить и описать компьютерную систему контрольно-диагностического тестирования знаний, умений и навыков по орфографии и пунктуации, в наибольшей степени адекватную поставленной цели исследования; составить реестр типичных орфографических и пунктуационных ошибок школьников и студентов младших курсов российских вузов и определить эффективные пути их устранения;

• разработать и апробировать технологию апробации электронных средств контроля и диагностики в учебном процессе: сформировать программу испытаний; создать измерительные инструменты; выработать алгоритм анализа полученных результатов;

• разработать и апробировать технологию интеграции компьютерной системы контрольно-диагностического тестирования в сложившуюся практику преподавания русского языка: определить принципы отбора, анализа выбранного средства и его методического описания, описать условия его функционирования, выработать комплекс требований к субъектам обучения; создать методические рекомендации по организации индивидуализированного учебного процесса по корректировке знаний, умений и навыков учащихся на основе их компьютерной диагностики.

Объектом исследования стал феномен педагогического тестирования и его влияние на повышение уровня знаний, умений и навыков учащихся, становление и развитие их предметных компетенций.

Предметом исследования являются особенности компьютерного контрольно-диагностического тестирования по русскому языку, его возможности в процессе формирования орфографической и пунктуационной грамотности школьников и студентов младших курсов российских вузов, способы его интеграции в практику преподавания и эффективного применения для развития культуры письменной речи учащихся.

Теоретическую и методологическую основу диссертационного исследования составили фундаментальные труды в следующих областях научного знания:

• теория и методика обучения русскому языку в школе и вузе (В.В. Бабайцева, В.А. Багрянцева, М.Т. Баранов, А.Д. Дейкина, Е.И.

Литневская, А.В. Текучев, Е.Г. Шатова и др.);

• теория и методика программированного обучения (В.П. Беспалько, Н. Краудер, И.П. Павлова, Б.Ф. Скиннер, Н.Ф. Талызина и др.);

• теоретико-методологические и психолого-педагогические основы использования компьютера в обучении (Б. Андерсен, В.П. Беспалько, Б.С. Гершунский, И.Г. Захарова, А.В. Осин, И.В. Роберт и др.);

• теория электронного учебника русского языка (О.И. Руденко-Моргун, А.Л. Архангельская, Л.А. Дунаева и др.);

Ю.К. Бабанский, Е.Н. Кабанова-Меллер, Я.А. Коменский, А.Н. Леонтьев, Н.А. Менчинская, П.И. Пидкасистый, С.Л. Рубинштейн, Е.Ф. Рыбалко, Н.Ф. Талызина, К.Д. Ушинский, Л.М. Фридман и др.);

• педагогическое проектирование (Е.С. Заир-Бек, А.П. Качалова, А.М. Новиков, Е.В. Телеева А.Ю. Уваров, Н.О. Яковлева и др.);

• методология научно-педагогических исследований (Т.С. Анисимова, В.А. Бордовский, В.П. Давыдов, Е.С. Козелева, О.А. Граничина и др.).

Научная новизна диссертационной работы заключается в том, что в ней впервые на уровне диссертационного исследования всесторонне изучена и описана в теоретическом и прикладном аспектах технология компьютерного контрольно-диагностического тестирования как средства повышения качества подготовки российских школьников и студентов младших курсов российских вузов по русскому языку. На этой основе:

• определены роль и место компьютерного контрольнодиагностического тестирования по орфографии и пунктуации в системе обучения русскому языку в российском школьном и высшем образовании;

• обобщена методологическая база компьютерного контрольнодиагностического тестирования по русскому языку;

• выявлены и описаны наиболее существенные разработки в области компьютерного контрольно-диагностического тестирования знаний, умений и навыков по орфографии и пунктуации;

• на основе анализа фактического материала, полученного в процессе экспериментального исследования, составлен реестр типичных орфографических и пунктуационных ошибок школьников и студентов младших курсов российских вузов и определены эффективные пути их устранения;

• разработана технология интеграции компьютерной системы контрольно-диагностического тестирования в сложившуюся практику преподавания русского языка.

Теоретическая значимость исследования всестороннем описании в теоретическом и прикладном аспектах феномена компьютерного контрольно-диагностического тестирования как средства повышения качества образования, что вносит определенный вклад в развитие теории электронного учебника русского языка. Разработанные технологии апробации электронных средств контроля и диагностики (формирование программы испытаний; создание набора измерительных инструментов;

алгоритм анализа полученных результатов) и интеграции этих средств в практику преподавания русского языка (отбор, анализ и разноплановое описание инновационного педагогического средства, определение условий его функционирования и выявление и взаимосвязей с другими средствами обучения, выдвижение комплекса требований к субъектам обучения;

выработка рекомендаций по организации индивидуализированного учебного процесса) являются значимыми для развития нового направления в компьютерной дидактике – теории и практики внедрения электронных средств обучения в образовательный процесс. Теоретическая база предложенной технологии обладает универсальностью и способна к переносу на другие предметные области.

Практическая ценность исследования заключается прежде всего в том, что в ходе исследования была доказана эффективность разработанной технологии интеграции компьютерного контрольно-диагностического тестирования в систему преподавания русского языка в школе и вузе.

Результаты эксперимента, проведенного с участием 1117 школьников и студентов младших курсов по предложенной в работе технологии апробации, свидетельствуют о способности выбранного инновационного инструмента обучения и контроля служить средством повышения качества знаний школьников и студентов при обучении орфографии и пунктуации, модернизировать учебный процесс, сделать его в полной мере индивидуализированным и личностно ориентированным.

Программа испытаний, набор измерительных инструментов и пошаговый алгоритм анализа полученных результатов, являющиеся составными компонентами предложенной технологии апробации электронных средств контроля и диагностики в учебном процессе, прошли успешное экспериментальное испытание с участием автора исследования и привлеченных к эксперименту учителей и могут быть использованы при комплексной оценке любого электронного средства обучения на этапе, предшествующем его внедрению в практику преподавания.

Разработанные методические рекомендации для учителей и преподавателей русского языка по применению компьютерных контрольнодиагностических систем тестирования способствуют их внедрению в практику преподавания дисциплины.

Материалы диссертации могут быть положены в основу спецкурсов и факультативов по проблемам применения компьютерных технологий в учебном процессе для учащихся гимназий, лицеев, общеобразовательных школ и вузов.

Результаты исследования нашли отражение в практической деятельности автора и учителей, участвовавших в эксперименте, в процессе использования тестов по орфографии и пунктуации при обучении русскому языку школьников и студентов.

Исследование проводилось поэтапно.

I этап (2002 – 2003 гг.) – поисково-теоретический, связанный с постановкой и осмыслением исследовательской проблемы. На этом этапе изучалась психолого-педагогическая, методическая, лингвистическая, научная и учебная литература; обобщался педагогический опыт в рамках проблемы исследования; были определены исходные принципы и методология исследовательского поиска.

II этап (2003 – 2004 гг.) – опытно-моделирующий, был связан с разработкой программы методического эксперимента, разработкой и апробацией материалов компьютерного контрольно-диагностического тестирования, с корректировкой его ресурсных возможностей, мониторингом педагогических интересов и интересов учащихся, с теоретическим и практическим обоснованием авторской концепции.

III этап (2004 – 2006 гг.) – аналитико-обобщающий, включал проведение методического эксперимента, анализ, обобщение и описание материалов и данных, полученных в ходе теоретико-прикладного исследования, формулирование в окончательном варианте методических выводов, сделанных на предыдущих этапах исследования; систематизацию и интерпретацию результатов исследования.

При решении поставленных задач были использованы следующие методы и подходы исследования, адекватные исследуемой проблеме:

• системно-структурный подход к анализу изучаемых явлений;

• концептуальный анализ психологической, педагогической и методической литературы по проблеме исследования;

• прогностические методы (моделирование учебного процесса в вариативных педагогических контекстах);

• методы наблюдения за процессом учения, анализа учебных и программных материалов, анализа учебной деятельности школьников и студентов младших курсов российских вузов;

• метод компьютерной диагностики навыков грамотного письма;

• метод педагогического эксперимента, анкетирование, опросы, метод открытого наблюдения, статистические методы.

Объективность и достоверность результатов и выводов исследования обеспечены исходными методологическими положениями, опорой на достижения теории и методики обучения русскому языку в школе и вузе, программированного, деятельностного и компьютерного обучения, педагогики и педагогической психологии, педагогического проектирования и моделирования; корректным использованием различных методов педагогического исследования; внедрением полученных результатов в педагогическую практику.

Апробация результатов исследования осуществлялись в соответствии с его основными этапами.

Результаты исследования получили отражение в публикациях автора, в том числе в научных статьях, излагались и обсуждались на Международных Виноградовских чтениях в 2002, 2004 и 2005 гг.

Экспериментальное исследование проводилось в течение ряда лет (2002/2003, 2003/2004, 2004/2005, 2005/2006 уч. гг.) в Московском городском педагогическом университете на филологическом факультете в форме практических занятий со студентами I – II курса дневного отделения и со школьниками 7-11 классов ГОУ СОШ «Лосиный остров» № 368 г. Москвы в форме факультативных занятий. Работа прошла апробацию на тестируемых (32 студента I и II курсов и 1085 школьников 7-11 классов), результаты апробации подтвердили исходную гипотезу.

Основные положения, выносимые на защиту:

1. Изменения в коммуникационной сфере, связанные с появлением и широким распространением новых средств диалогового общения в письменной форме через Интернет и мобильную телефонию, привели к появлению нового социального и коммуникативного феномена – системному нарушению правил русского письма представителями молодого поколения, игнорированию ими культуры и норм письменной коммуникации. В связи с этим возрастает значимость орфографии и пунктуации как центральных практических разделов школьного и вузовского курсов русского языка, встает вопрос об использовании инновационных средств для диагностики и устранения индивидуальных орфографических и пунктуационных ошибок, допускаемых школьниками и студентами.

2. Современные компьютерные тестовые системы по русскому языку, помимо основной – контролирующей – функции, имеют дополнительные функциональные возможности – диагностическую и обучающую.

Компьютерный контрольно-диагностический тест по орфографии и пунктуации не только определяет уровень сформированности орфографических и пунктуационных знаний, умений и навыков учащихся, но и выявляет круг тем, вызывающих затруднения, причины реальных и потенциальных ошибок. Это свойство приобретает особую важность в связи с актуальной для российской системы образования проблемой организации индивидуализированного, личностно ориентированного обучения разнородного контингента учащихся российских школ и вузов, дифференцированного по различным характеристикам.

3. Компьютерные контрольно-диагностические тесты по орфографии и пунктуации значительно повышают качество учебной работы учителей и преподавателей русского языка и, как следствие, – качество знаний, уровень орфографических и пунктуационных умений и навыков школьников и студентов. Применение компьютерных контрольно-диагностических тестов позволяет модернизировать и разнообразить процесс обучения, повышает заинтересованность учащихся в результатах учения.

4. Для интеграции компьютерного контрольно-диагностического инструментария в сложившуюся практику преподавания русского языка в силу его сложности и многофункциональности требуется специально разработанная технология. Инновационность данного средства обучения и контроля обусловливает потребность в соответствующем методическом сопровождении для его эффективного и корректного использования в самостоятельной деятельности учащихся по повышению культуры письменной речи.

5. На этапе, предшествующем внедрению инновационного средства обучения в практику преподавания, необходимо провести его предварительную апробацию на основе специально разработанного комплекта апробационных материалов: программы испытаний, контрольноизмерительного инструментария и алгоритма анализа результатов апробации.

Использование созданных материалов способствует всесторонней и объективной оценке нового средства обучения и принятию обоснованного решения о целесообразности его использования в учебном процессе.

Структура и объем диссертации. Тема и поставленные задачи определили структуру диссертационной работы, которая состоит из введения, трех глав, заключения, списка использованной литературы, насчитывающего 172 наименования источников научной литературы, и двух приложений. Диссертация снабжена таблицами и графиками, которые в сжатом виде представляют выводы исследования. Общий объем диссертации составил 228 страниц.

По теме диссертационного исследования опубликовано 5 работ.

ОСНОВНОЕ СОДЕРЖАНИЕ РАБОТЫ

Во Введении обосновывается актуальность избранной темы, определяются объект, предмет, формулируются гипотеза, цель, задача, указываются методы исследования, раскрываются научная новизна, теоретическая и практическая значимость работы, излагаются положения, выносимые на защиту.

Первая глава работы «Педагогическое тестирование как инструмент повышения качества образования» посвящена рассмотрению современных подходов к определению качества образования, описанию существующих педагогических измерителей, анализу их алгоритмизированных моделей, а также исследованию концептуальных основ педагогического тестирования, методологии процесса тестирования и изучению статистических показателей качества теста.

В последние годы все более заметным, по сравнению с недавним прошлым, становится возрастание требований к качеству образовательных услуг со стороны их потребителей как из производственной, так и из общественной сферы. С этой точки зрения качество образования, с одной стороны, сегодня рассматривается как социальная категория, отвечающая потребностям каждой отдельной личности и общества в целом, а с другой – как совокупный результат деятельности образовательного учреждения и учебной деятельности субъектов образовательного процесса – педагога и учащегося. В работе проанализирован ряд наиболее распространенных определений качества образования, встречающихся в современной научной литературе (А.И. Субетто, В.М. Полонский, С.Е. Шишов и В.А. Кальней, В.А. Качалов, С.И. Ожегов, В.П. Панасюк, В.М. Коротов, Е.В. Бондаревская, В.Т. Фоменко, С.К. Булдаков, О.Е. Лебедев, М.М. Поташник), а также в документах ЮНЕСКО и Национальной доктрине образования в Российской Федерации. На этой основе был сделан вывод о том, что в целом понятие «качество образования»

приравнивается к качественному процессу обучения – организованному, устойчивому и результативному процессу коммуникации, порождающему обучение, к предоставлению доступа к получению разносторонних знаний, отвечающих запросам и ожиданиям потребителей. Таким образом, в значительной степени определяющим фактором качества системы образования в целом является уровень образовательных учреждений и уровень качества оказываемых ими образовательных услуг, выражающихся в образовательных результатах.

Между тем качество ожидаемого образовательного результата по ряду причин не всегда соответствует качеству образовательного процесса, хотя последний, безусловно, во многом определяет его.

Качество образования – понятие динамическое, оно не может быть приравнено к конечному результату и является лишь средством, с помощью которого выявляется соответствие конечного продукта стандарту.

Качественное образование зависит от соотношения таких параметров, как цели, результат их достижения и способы достижения целей, при том что цели (то есть собственно ожидаемые результаты) должны быть заданы технологически и для своей успешной реализации не должны выходить за пределы зоны потенциального развития учащегося.

Педагогикой накоплен большой арсенал способов проверки результатов обучения: это устные опросы, контрольные и лабораторные работы, зачеты и экзамены, коллоквиумы, олимпиады, итоговые работы (в том числе эссе, рефераты, курсовые и дипломные проекты) и др. Окончательная оценка по результатам контроля в современной образовательной практике в большинстве случаев является либо индивидуальной (выставляется преподавателем), либо экспертной (выставляется комиссией) и определяется по порядковой (качественной) пятибалльной шкале. В то же время во многих исследованиях отмечается, что контроль качества подготовки должен строиться в соответствии с внутренним состоянием обучающегося на момент его аттестации, в то время как результаты обучения при перечисленных формах аттестации оцениваются по внешним признакам, выражены во внешних наблюдениях экзаменаторов. Данный сложившийся традиционный подход к оценке учебных достижений, во многом субъективный, достаточно долгое время тормозил развитие тестового контроля.

В настоящее время в связи с усилением внимания государства и общества к качеству образовательных результатов на первый план выходит разработка современного научно обоснованного алгоритмизированного аппарата для получения представлений не только о внешних, но и о внутренних параметрах знаний учащихся. В диссертации исследован круг работ, преимущественно зарубежных, посвященных разработке теории параметрических методов педагогических измерений (Item Response Theory – IRT) (H.J. Rogers и Linden W.J., R.K. Hambelton, L.W. Anderson и D. R.& Krathwohl, В. Аванесов). Благодаря использованию эффективного математического аппарата, построенного на итерационных процессах (уточнениях при последовательных испытаниях), IRT позволяет перейти от оценки внешних признаков (наблюдаемых результатов выполнения контрольного задания) к оценке латентных (скрытых, внутренних) параметров самих испытуемых, обусловливающих результат на момент измерения знаний.

В связи с этим в диссертационном исследовании подвергнуты анализу современные тестовые системы, конструируемые на основе разных математических моделей, в том числе комбинированных (A. Binet и T. Simon, A. Birnbaum, G. Rasch, L.W. Anderson и D. R.& Krathwohl, М.Б. Челышкова и Г.С. Ковалева, Ю.М. Нейман и В.А. Хлебников).

Рассмотрение концептуальных основ педагогического тестирования и методологии тестирования как учения об основных положениях, формах, методах, принципах научного исследования и эффективной организации практики в сфере педагогического контроля и оценки уровня подготовки обучающихся позволило прийти к выводу о междисциплинарности тестового педагогического контроля, трактовать его как теорию, объединяющую достижения педагогики, психологии, теории измерений, теории качества, статистики, математики, теории организации и управления. В диссертации обобщены принципы научной организации тестового контроля на основе анализа требований, выработанных зарубежной и отечественной теорией и практикой тестологии. Они формулируются в виде основных правил, способствующих повышению эффективности тестирования. Особое внимание уделяется статистическим показателям качества теста и психологопедагогическим аспектам тестирования.

Во второй главе «Компьютерное контрольно-диагностическое тестирование по орфографии и пунктуации в системе обучения русскому языку» даются описание и комплексная оценка программированного обучения как методологической и методической базы компьютерного контрольно-диагностического тестирования по русскому языку, рассматриваются цели и психолого-педагогические основы управления учебным процессом, исследуются критерии его эффективности, изучаются специфические принципы отбора и структурирования содержания курса русского языка с целью его программирования и алгоритмизации, обобщается методологическая база компьютерного контрольнодиагностического тестирования по русскому языку.

Суть идеи программированного обучения, сформулированной Б.Ф. Скиннером, заключается во внедрении достижений кибернетики в практику обучения, в повышении таким образом эффективности управления учебным процессом путем построения его в соответствии с двумя условиями:

последовательной реализацией требований, выдвигаемых общей теорией управления, и учетом специфических закономерностей учебного процесса, известных современной психологии и педагогике обучения.

В работе исследуется ряд концепций программированного обучения, относящихся к проблемному полю наиболее известных «технологичных»

педагогических теорий: концепция бихевиоризма, ассоциативнорефлекторная теория усвоения, концепция алгоритмизации и собственно алгоритм поэтапного формирования умственных действий.

В то же время исследование показало, что в теории и практике программированного обучения вместо органического сочетания двух начал – кибернетического и психолого-педагогического – чаще всего либо одно подменяется другим, либо учитывается только одно из них. Еще одним широко распространенным мнением является взгляд на процесс программированного обучения как на процесс сугубо автоматизированный, и если в него вмешивается учитель, то такое обучение представители данной точки зрения не считают в полном смысле программированным. Следует признать, что в этом подходе содержится рациональное зерно – признание автоматизации в качестве исходного признака программированного обучения привело в конечном итоге к конструированию различных обучающих устройств, электронных учебников и пособий, цифровых образовательных ресурсов разного назначения для обучения разным дисциплинам, в том числе тестовых систем по русскому языку.

Повышенный интерес педагогической общественности к тестовым видам контроля, отраженный в обширном массиве проанализированных научно-методических публикаций, позволяет говорить о наметившейся тенденции рассмотрения тестирования в контексте актуальных для современной школы взаимосвязанных проблем повышения качества образования и его информатизации, о смещении в этой связи акцентов с сугубо контролирующей функции единого тестового контроля «для всех» на его скрытые вариативные диагностические и обучающие функциональные возможности.

Компьютерный контрольно-диагностический тест по орфографии и пунктуации – это специально организованная система заданий, направленная не только на определение уровня сформированности орфографических и пунктуационных знаний, умений и навыков учащихся, но и на выявление круга тем, вызывающих затруднения, и глубинных причин ошибок, как реальных, допущенных в процессе тестирования, так и потенциальных, которые могут быть совершены учащимся в будущем, в измененных условиях контроля.

В работе приводится обзор существующих компьютерных тестовых систем по русскому языку, анализируются их достоинства и недостатки, особый упор делается на системы компьютерного контрольнодиагностического тестирования, которые способны полноценно поддерживать процесс программированного обучения русскому языку, особенно если речь идет о его практической части – обучении орфографии и пунктуации. Проведенный анализ позволил выбрать из множества электронных средств, предназначенных для осуществления контроля в тестовой форме, систему контрольно-диагностического тестирования, реализованную в двух программных продуктах – «Тесты по орфографии»

(М.: 1С, 2001) и «Тесты по пунктуации» (М.: 1С, 2000). Выбор был обусловлен, во-первых, единственной в своем роде авторской концепцией, положенной в основу взаимосвязанного контроля и диагностики орфографических и пунктуационных знаний, умений и навыков учащихся (остальные проанализированные тестовые системы, использующие лишь элементы диагностики, не были признаны нами в полной мере диагностическими), и ее полным соответствием целям и задачам исследования, а с другой – тесной связью этих двух программных продуктов с электронной мультимедийной предметной средой «1С Репетитор: Русский язык (М.: 1С, 1999-2005), поддерживающей центральную идею диагностики учебных достижений – вывод из зоны контроля в индивидуализированное обучение, учитывающее личностные и когнитивные параметры учащихся.

Каждый тест диагностической системы включает четыре субтеста:

первый – проверяет степень сформированности практических навыков;

второй – теоретические знания; третий – умение применять эти знания на практике. В процессе выполнения четвертого субтеста системы выявляются пробелы в знаниях, способные стать причиной ошибки на этапе контроля.

Первый субтест контролирующий, тестовые задания организуются в виде частичного диктанта. Если это задание выполнено хорошо или отлично, дальнейшее тестирование можно было бы не продолжать. Однако, как уже говорилось выше, в задачи диагностического тестирования входит как установление причин допущенных ошибок, так и прогнозирование ошибок потенциальных, по какой-либо причине не выявленных на первом этапе тестирования, но, тем не менее, возможных в других условиях контроля. Как бы корректно и сбалансировано ни были составлены варианты контрольного теста, элемента случайности избежать трудно: например, с конкретным словом, словосочетанием, предложением учащийся уже встречался, но узнать то же явление в другом тексте он не сможет. Кроме того, не исключено, что на первом этапе контроля учащемуся могла помочь интуиция, полагаться на которую в других, более жестких условиях (например, на экзамене) не следует. Если учащийся – будущий филолог, ему тем более важно владеть как практическими навыками, так и знанием теории, умением объяснять языковое явление.

Второй субтест проверяет знания теории по теме, и если таковые отсутствуют, то вряд ли можно говорить о том, что учащийся ею владеет. В этой ситуации необходимо выяснить, может ли учащийся освоить данные правила, ведь вполне вероятно, что причины неуспеха лежат глубже: правило опирается на те знания, которых учащийся в силу каких-либо причин не имеет.

С другой стороны, очевидно, что само по себе знание теории и правил не является гарантией освоения темы, ибо знание, как известно, может быть чисто формальным. Поэтому третий субтест проверяет умение применять имеющиеся знания на практике. Для того, кто на втором этапе тестирования не показал знания теории, третий субтест тоже небесполезен – задания на сопоставление правила и примера активизируют его мышление, наблюдательность, аналитико-сопоставительные способности.

По результатам прохождения трех первых этапов тестирования можно сделать вывод о том, в каком объеме учащийся владеет конкретной темой, обладает ли он интуитивной грамотностью, не подкрепленной знанием теории, или вполне осознанно пользуется имеющимися у него знаниями.

Перед четвертым этапом тестирования мы не можем еще говорить о диагностике ошибок – пока мы только определили глубину знакомства тестируемого с конкретной темой.

Четвертый субтест включает в себя задания по темам, смежным с проверяемой. Именно на этом этапе возможно осуществить диагностику реальной и потенциальной ошибок. Для иллюстрации обратимся к очень важной части контрольно-диагностического теста – к информационному экрану с результатами его выполнения.

Работа с экраном результата начинается со знакомства с несколькими заранее открытыми позициями. Тестируемый может узнать, сколько времени он потратил на прохождение теста и сравнить его с рекомендуемым временем. Ниже располагается информация об общем количестве предложенных заданий и общем количестве допущенных ошибок. В специальной позиции – результаты по первым трем этапам тестирования. По первым трем этапам также выводится вербальный итоговый комментарий, дающий оценку практическим навыкам и теоретической подготовке учащегося по теме и совет обратиться к рекомендациям (в случае, если были допущены ошибки). Данный комментарий формируется автоматически из блоков текста, соответствующих поэтапным оценкам.

Следующая позиция на экране, которую пользователь при желании открывает, – это «Анализ работы». В этом разделе приводится полный свод правил по теме, количество правильных и неправильных ответов в заданиях на каждое правило, что дает возможность учащемуся самостоятельно оценить себя и увидеть, какие правила следует повторить. Данный раздел будет полезен и учителю при составлении плана индивидуального урока по изучаемой теме.

Раздел «Рекомендации» формируется на основе анализа работы пользователя по всем четырем этапам. Рекомендации даются в виде анализа ошибки и гипертекстовой отсылки в соответствующий раздел мультимедиа комплекса. Выйдя через отсылку в комплекс, пользователь может работать над нужной темой по своему усмотрению: читать статью «Учебника», выполнять упражнения к ней, знакомиться со всеми доступными материалами. Но при этом выход в мультимедиа комплекс через контрольнодиагностический тест концентрирует учащегося на решении конкретной учебной задачи. Именно этот раздел контрольно-диагностических тестов можно рассматривать как узел, управляющий последующими самостоятельными учебными действиями учащегося. Безусловно, рекомендациями может пользоваться и учитель для составления программы обучения, но, что очень важно для компьютерных обучающих материалов, – основа программы дальнейшей работы составляется автоматически по результатам тестирования, доступна пользователю, руководит его действиями.

Раздел «Просмотр работы. Апелляция» дает возможность ознакомиться с результатами работы по каждому заданию. Эту часть контрольнодиагностических тестов также можно назвать обучающей, поскольку каждая ошибка снабжена комментарием, а «Апелляция» позволяет связаться по электронной почте с авторами комплекса: оценить предлагаемый материал, задать вопросы, опротестовать оценки, выразить претензии.

На основе проанализированной выше модели компьютерного диагностического тестирования по русскому языку было проведено масштабное экспериментальное исследование, одним из компонентов которого стало анкетирование, проведенное среди школьных учителей и преподавателей русского языка. Анкетирование дало ценную информацию о представлениях педагогов об основных преимуществах предлагаемого компьютерного контрольно-диагностического тестирования. Участники опроса видят эти преимущества в ускорении обработки результатов – 39,73% (29/73), в повышении достоверности и более высокой защите от возможной фальсификации – 12,33% (9/73), в возможности сохранять все результаты в единой базе данных – 15,07% (11/73), в удобстве для испытуемого, который может видеть вопросы и свои ответы на одном экране – 12,33% (9/73), в скорости распространения компьютерных тестов по сети – 9,59% (7/73).

Важно, что при этом 100% (73/73) участников анкетирования высказались однозначно положительно в пользу диагностических возможностей компьютерного тестового контроля, оценили его личностно ориентированный потенциал. В качестве особого преимущества было отмечено то, что компьютерный контроль знаний с расширенными диагностическими возможностями не «устраняет» преподавателя, не снижает его роли в учебном процессе, а, напротив, позволяет активнее влиять на ход учебного процесса, успешнее осуществлять индивидуальный подход в обучении, всемерно развивать самостоятельность учащихся, повышать их мотивацию и стремление к полноценному усвоению учебного материала.

Далее в работе рассматривается проблема структуризации и дозирования содержания курса русского языка в той его части, которая связана с приобретением орфографических и пунктуационных знаний, учений и навыков, исследуются специфические принципы отбора и структурирования содержания курса русского языка с целью его программирования и алгоритмизации в компьютерных контрольнодиагностических системах. Отмечается, что в формулировке цели обучения должны быть отражены объем предметного содержания, формируемые компетенции, объем умений и навыков и уровень проявления их сформированности (обобщенность, автоматизация, прочность и др.), шкала ожидаемых сдвигов в уже имеющихся достижениях, а также в интеллектуальном и общем развитии личности учащегося. Адекватным способом для задания комплексной цели обучения является указание видов внешней деятельности или системы внешних действий по овладению содержанием обучения, которые учащиеся должны выполнить корректно.

В диссертации обобщена методологическая база компьютерного контрольно-диагностического тестирования по русскому языку:

суммированы сущностные характеристики контрольно-диагностического теста; проанализированы принципы формирования контрольнодиагностических тестовых заданий разных типов (тестовые задания закрытой формы, задания на соответствие и на установление правильной последовательности, задания открытой формы); представлены различные классификации контрольно-диагностических систем на основе разных параметров, а также методы оценки их качества, базовые элементы технологии их проектирования и варианты инструментальной основы.

Определены пути реализации компьютерного контрольнодиагностического тестирования по орфографии и пунктуации: корректный отбор содержания обучения и разбиение учебного материала на небольшие порции; перманентный контроль знаний, умений и навыков; переход к следующей порции лишь после ознакомления учащегося с правильным ответом, характером и причиной допущенной им ошибки; обеспечение возможности каждому ученику работать со свойственной ему, индивидуальной, скоростью усвоения (т.е. реализацию на деле индивидуализированного подхода в обучении). При использовании компьютерного контрольно-диагностического тестирования учебный процесс должен быть направлен на реализацию его основных функций – диагностической, контролирующей, обучающей, воспитывающей, мотивирующей, развивающей и прогностической, и проводиться с учетом его базовых принципов – научности и эффективности, иерархической организации, объективности, систематичности, справедливости и всесторонности педагогического контроля.

Педагогический анализ результатов контрольно-диагностического тестирования помогает педагогу «увидеть со стороны» результаты не только учащихся, но и результаты своей собственной деятельности, проанализировать уровень овладения учебным материалов (по конкретным микротемам) каждым учащимся, определить глубинные причины его ошибок и определить на этой основе направления совершенствования дальнейшего учебного процесса. С точки зрения современных представлений о качестве образования и фиксации его результатов немаловажно и то, что автоматическое накопление статистических данных тестирования обеспечивает возможности создания в школе и вузе качественного мониторинга образовательного процесса.

В третьей главе «Методика использования компьютерного контрольно-диагностического тестирования по русскому языку при обучении орфографии и пунктуации (описание педагогического эксперимента)» представлена методическая основа педагогического эксперимента, дана характеристика условий его проведения и описание задействованного в нем контингента учащихся, подробно описан ход экспериментального исследования по компьютерному контрольнодиагностическому тестированию знаний школьников и студентов младших курсов, проведен комплексный анализ результатов педагогического эксперимента с использованием методов математической статистики, выявлены и систематизированы типичные для современной языковой ситуации орфографические и пунктуационные ошибки.

Формирование устойчивых орфографической и пунктуационной компетенций учащихся на сегодняшний день является одной из основных задач дисциплины «Русский язык», носящей в целом коммуникативный и практикоориентированный характер в системе как общего, так и высшего образования. Возросшая значимость практической орфографии и пунктуации определяется явным усилением в последние годы роли письменной речи, произошедшим на фоне расширения коммуникационной среды письменного общения посредством интернета и средств мобильной связи, предоставляющих услуги по обмену текстовыми сообщениями. Педагоги и филологи отмечают, что одной из характерных черт языковой специфики нашего времени стало системное нарушение правил русского письма, сознательное или (что встречается намного чаще) бессознательное. Этот социальный и коммуникативный феномен с неизбежностью влияет на еще не окрепшие у школьников знания о нормах русского языка, ведет к игнорированию культуры письменной коммуникации.

Педагогический эксперимент по проверке эффективности системы компьютерных контрольно-диагностических тестов по орфографии и пунктуации в формировании практической грамотности учащихся и определению подходов к разработке технологии их последующего внедрения проводился в течение 2002/2003, 2003/2004, 2004/2005, 2005/2006 уч. гг. в ГОУ СОШ «Лосиный остров» № 368 г. Москвы в форме факультативных занятий с учащимися 7-11 классов и в ГОУ «Московский городской педагогический университет» на филологическом факультете в форме практических занятий со студентами I – II курса дневного отделения. В общей сложности в эксперименте приняли участие 1117 испытуемых ( студента младших курсов и 1085 школьников 7-11 классов).

В диссертации подробно описаны и проиллюстрированы материаламиобразцами методика проведения эксперимента, а также созданный в процессе исследования комплект апробационной документации (программа испытаний; измерительные инструменты; выработка алгоритма анализа полученных результатов), в полном объеме приводится алгоритм анализа полученных результатов с учетом различных параметров (количество тестируемых, количество тестов, количество этапов тестирования, количество ответов по оценкам, коэффициент успешности прохождения тестирования и затраченное время), раскрываются и анализируются расчеты, произведенные на основе методов математической статистики. Итоговые результаты тестирования представлены с использованием таблиц и графиков, образцы исходных материалов для анализа помещены в Приложение 2.

Совокупность частных и общих результатов эксперимента сведена в комплексных таблиц, позволяющих всесторонне оценить достоверность полученных данных. Таблицы снабжены комментарием, их анализ сопровождаются выводами, сделанными на основе систематизации типичных, наиболее частотных орфографических и пунктуационных ошибок, допускаемых учащимися. Результаты проведенного эксперимента полностью подтвердили исходную гипотезу и предоставили доказательства того, что разработанные технологии апробации и интеграции компьютерного контрольно-диагностического тестирования по орфографии и пунктуации в систему обучения русскому языку в школе и вузе способствует его внедрению в учебный процесс в качестве необходимого компонента, обеспечивающего гибкость и адаптивность учебного процесса, оказывая существенное влияние на повышение практической грамотности каждого учащегося, позволяя скорректировать обучение в соответствии с его индивидуальными личностными и когнитивными особенностями.

На основе полученных результатов разработана и апробирована технология интеграции компьютерного контрольно-диагностического тестирования в практику преподавания русского языка, включающая шесть этапов:

• отбор электронных средств обучения русскому языку на основе изучения массива актуальных разработок, прошедших предварительную экспертную оценку в рамках федеральных проектов по информатизации образования;

• анализ выбранных средств с учетом целей и задач обучения;

• разноплановое (линейное и сценарное) методическое описание выбранных электронных средств обучения;

• определение условий их функционирования в образовательном пространстве учебного заведения и взаимосвязей с другими средствами обучения;

• выдвижение комплекса требований к субъектам обучения: педагогам, учащимся, администрации учебного заведения;

• рекомендации по организации индивидуализированного учебного процесса на основе адекватных поддерживающих средств.

В качестве средства обучения, способного к тесной интеграции с компьютерными контрольно-диагностическими тестами, был определен мультимедийный комплекс «1С Репетитор: Русский язык» (М.: 1С, 1999В работе содержится описание составляющих данного комплекса и методика их интеграции с компонентами контрольно-диагностических тестов в целостную среду обучения.

В Заключении подводятся итоги исследования, обобщаются сделанные выводы и рекомендации по результатам использования предложенных технологий апробации и последующей интеграции компьютерного контрольно-диагностического тестирования в процесс обучения русскому языку в школе и вузе.

1. Проведенное исследование позволяет с уверенностью говорить о том, что на базе опыта тестирования, накопленного в России за последние десять лет, к настоящему моменту возникли все условия для комплексного использования тестовых материалов и новейших информационных технологий массового тестирования с целью оценки качества подготовки учащихся. В диссертации всесторонне исследован феномен педагогического тестирования как инструмента повышения качества образования, определены роль и место компьютерного контрольно-диагностического тестирования по орфографии и пунктуации в системе обучения русскому языку в российском школьном и высшем образовании, обобщена его теоретическая база, систематизированы и описаны принципы отбора и структурирования содержания школьного курса русского языка с целью его представления в контрольно-диагностических системах.

2. Выявлено, что в процессе активной информатизации сферы преподавания русского языка за последние годы сформировался массив электронных образовательных ресурсов для поддержки обучении предмету, немаловажное место в которых занимают средства контроля и диагностики.

В силу своей инновационности, сложности, высокой технологичности и многофункциональности данные средства долгое время не находили широкого применения в российской общеобразовательной и высшей школе по причине неразработанности механизмов их оценки и интеграции в учебный процесс. Разработанная в диссертационном исследовании технология апробации электронных средств контроля на этапе, предшествующем внедрению (программа испытаний, набор измерительных инструментов и пошаговый алгоритм анализа полученных результатов), позволяет с высокой степенью объективности оценить новое средство с точки зрения целесообразности и эффективности его использования в практике преподавания.

3. На основе анализа массива существующих разработок выявлены и описаны компьютерные контрольно-диагностические тесты по орфографии и пунктуации, направленные как на контроль (проверку степени сформированности практических навыков и теоретических знаний, умений применять знания на практике), так и на диагностику (выявление пробелов в знаниях, способных стать причиной ошибки), что в совокупности позволяет формировать индивидуализированные образовательные траектории для каждого обучающегося. В работе доказано, что контрольно-измерительные материалы высокого качества, в том числе (и в первую очередь) обладающие диагностическими свойствами, способны обеспечить надежную и достоверную информацию о качестве полученных знаний, умений и навыков.

Результаты эксперимента, проведенного с участием 1117 школьников и студентов младших курсов по предложенной в работе технологии апробации, свидетельствуют о способности выбранного инновационного инструмента обучения и контроля служить средством повышения качества знаний школьников и студентов при обучении орфографии и пунктуации, модернизировать учебный процесс, сделать его в полной мере индивидуализированным и личностно ориентированным. Проведенное выявление типичных ошибок по различным темам орфографии и пунктуации русского языка позволило составить реестр наиболее частотных орфографических и пунктуационных ошибок учащихся и определить эффективные пути их устранения, в определенной степени очертить параметры ситуации, сложившейся в настоящее время в сфере письменной речи молодых носителей русского языка.

4. В ходе исследования разработана и апробирована технология интеграции компьютерной системы контрольно-диагностического тестирования в сложившуюся практику преподавания русского языка:

определены принципы отбора, анализа выбранного средства и его методического описания, описаны условия его функционирования, выработан комплекс требований к субъектам обучения; созданы методические рекомендации по организации индивидуализированного учебного процесса по корректировке знаний, умений и навыков учащихся на основе их компьютерной диагностики.

5. Дальнейшие перспективы исследования видятся в совершенствовании методики использования системы контрольно-диагностических тестов в практике преподавания русского языка в школе и вузе, в определении путей адаптации предложенной технологии апробации и интеграции электронных средств обучения в учебный процесс по русскому языку к другим предметным областям.

Основные положения и результаты исследования изложены в следующих научно-методических публикациях автора:

1. Сокурова Т.Ю. Тестовый контроль в школе и вузе: современный этап развития // Вестник Государственного университета управления:

Развитие отраслевого и регионального управления. – Серия:

Современная образовательная среда университета. – 2008. – № 13(23). – С. 437-440.

2. Сокурова Т.Ю. Компьютерное диагностическое тестирование по русскому языку для русских школьников и иностранных студентов // Русский язык за рубежом. – 2009. – № 1. – С. 49-52.

3. Сокурова Т.Ю. Компьютерные технологии в практике обучения // Дни науки – 2002. VI Виноградовские чтения. Москва, 27 марта 2002 г.:

Материалы конференции. – М.: МГПУ, 2002. – С. 25-26.

4. Сокурова Т.Ю. Компьютерное тестирование как обучающая и контролирующая программа // Русский язык в разноаспектном описании. VII Международные Виноградовские чтения. Москва, 26-28 марта 2003 г.:

Материалы конференции. – М.: МГПУ, 2004. – С. 287-289.

5. Сокурова Т.Ю. Виды лингвистических моделей в системе компьютерного моделирования // Русский язык: уровни и аспекты изучения.

VIII Международные Виноградовские чтения. – Москва, 23-25 марта 2004 г.

– М.: МГПУ, 2005. – С. 286-290.

Интеграция компьютерного диагностического тестирования по орфографии и пунктуации в практику преподавания русского языка Диссертация посвящена проблемам внедрения в образовательную практику российских школ и вузов компьютерного контрольнодиагностического тестирования по орфографии и пунктуации как средства повышения качества подготовки учащихся по русскому языку. В работе всесторонне исследована в теоретическом и прикладном аспектах технология компьютерного контрольно-диагностического тестирования; определены его роль и место в системе обучения русскому языку; обобщена его методологическая баз; на основе анализа значительного фактического материала, полученного в процессе многолетнего экспериментального исследования, составлен реестр типичных орфографических и пунктуационных ошибок школьников и студентов младших курсов российских вузов; разработана технология интеграции компьютерной системы контрольно-диагностического тестирования в сложившуюся практику преподавания.

The integration of diagnostic spelling and punctuation computer test into the practice of the Russian language teaching The thesis is devoted to the problems of introduction of computer spelling and punctuation test in Russian educational practice to improve the quality of a pupil’s language skills. In this work the technology of diagnostic computer testing is comprehensively investigated in theoretical and practical aspects. Also, the work clearly presents its role and place in Russian language studies. In this thesis is generalized the method base of the investigation. Basing on the analysis of the significant amount of important scientific material, worked out during a long-term experimental research, is created a register of typical spelling and punctuation mistakes gathered among the pupils and junior college students. And at last, in this thesis is created a technology to integrate the system of diagnostic computer testing into everyday teaching practice.