Диагностирование учебных достижений. Современные средства диагностики учебных достижений Диагностика учебных достижений учащихся
Для диагностики успешности обучения в школе разрабатываются специальные методы, которые разными авторами называются тестами учебных достижений, тестами успешности, дидактическими тестами и даже тестами учителя (под последними могут также подразумеваться тесты, предназначенные для диагностики профессиональных качеств педагогов, либо малоформализованные диагностические средства, которые может использовать учитель, такие, как наблюдение, беседа и др.).
Как отмечает американский психолог А. Анас-тази, по численности этот тип тестов занимает первое место.
Тесты достижений предназначены для того, чтобы оценить успешность овладения конкретными знаниями и даже отдельными разделами учебных дисциплин, и являются более объективным показателем обученности школьника, чем отметка. Последняя зачастую становится не только оценкой знаний учащегося, но и инструментом воздействия на него, может выражать отношение учителя к степени его дисциплинированности, организованности, особенностям поведения и т.д. Тесты достижений лишены этих недостатков, разумеется, при условии грамотного их составления и применения.
Тесты достижений отличаются от собственно психологических тестов (способностей, интеллекта). Их отличие от тестов способностей состоит, во-первых, в том, что с их помощью изучают успешность овладения конкретным, ограниченным определенными рамками учебным материалом, например разделом математики "Стереометрия" или курсом английского языка. На формирование способностей (например, пространственных) обучение также будет оказывать влияние, но оно не является единственным фактором, определяющим уровень их развития. Поэтому при диагностике способностей трудно найти однозначное объяснение высокой или низкой степени их развитости у школьника. Во-вторых, различие между тестами определяется
целями их применения. Тесты способностей направлены главным образом на выявление предпосылок к тем или иным видам деятельности и претендуют на прогнозирование выбора для индивида наиболее подходящей профессии или профиля обучения. Тесты же достижений применяются для оценки успешности овладения конкретными знаниями, с целью определения эффективности программ, учебников и методов обучения, особенностей работы отдельных учителей, педагогических коллективов, т.е. диагностируют прошлый опыт, результат усвоения тех или иных дисциплин или их разделов. Хотя нельзя отрицать того факта, что тесты достижений также могут в определенной степени предсказывать темпы продвижения учащегося в той или иной учебной дисциплине, поскольку имеющийся на момент тестирования высокий или невысокий уровень овладения знаниями не может не отразиться на дальнейшем процессе обучения. Указывая на разницу в обсуждаемых типах тестов, А. Анастази отмечает, что она наиболее выпукло выступает при оценке их валидности: "Лучший способ оценить тесты способностей - это осуществить прогностическую критериально-ориентированную валидизацию, тогда как тесты достижений в основном оцениваются в терминах валидности по содержанию" (А. Анастази, 1982. Т. 2. С. 37).
Тесты достижений отличаются также и от тестов интеллекта Последние направлены не на диагностику конкретных знаний или фактов, а требуют от учащегося умения совершать с понятиями (пусть даже и учебными) определенные умственные действия, такие, как проведение аналогии, классификации, обобщение и др.
Это отражено и в формулировании конкретных заданий тестов того и другого типа. Например, тест достижений на материале истории определенного периода может содержать такие вопросы:
Заполни пропуски в предложениях:
Вторая мировая война началась в... году, а) 1945; б) 1941; в) 1939; г) 1935. 22 июля 1941 года фашисты напали на... а) Польшу; б) Советский Союз; в) Францию; г) Венгрию. В тесте же умственного развития вопросы с использованием понятий из истории будут иметь следующий вид:
Вам даны пять слов. Четыре из них объединены общим признаком, пятое слово к ним не подходит. Его надо найти и подчеркнуть, а) товар; б) город; в) ярмарка; г) натуральное хозяйство; д) деньги, а) рабовладелец; б) раб; в) крестьянин; г) рабочий; д) ремесленник. Для того чтобы правильно ответить на вопросы, входящие в тест достижений, необходимы знания конкретных фактов, дат и др. Старательный ученик, обладающий хорошей памятью, без труда может найти правильные ответы в заданиях теста достижений. Однако если у него плохо сформированы умения работать с понятиями, анализировать их, находить существенные признаки, то задания теста интеллекта могут вызвать значительные затруднения (поскольку для их выполнения только хорошей памяти недостаточно) Необходимо владение целым рядом мыслительных операций, знание тех понятий, на материале которых составлены задания теста.
Наряду с тестами достижений, предназначенными для оценки усвоения знаний по конкретным дисциплинам или их циклам, в психологии разрабатываются и более широко ориентированные тесты Это, например, тесты на оценку отдельных навыков, требующихся школьнику на разных этапах обучения, таких, как некоторые общие принципы решения математических задач, анализа литературных текстов и др. Еще
более широко ориентированными являются тесты для изучения умений, которые могут пригодиться при овладении рядом дисциплин, например навыки работы с учебником, математическими таблицами, географическими картами, энциклопедиями и словарями. И наконец, существуют тесты, направленные на оценку влияния обучения на формирование логического мышления, способности рассуждать, строить выводы на основе анализа определенного круга данных и т.д. Эти тесты в наибольшей степени приближаются по своему содержанию к тестам интеллекта и высоко коррелируют с последними. Поскольку тесты достижений предназначены для оценки эффективности обучения по конкретным предметам, то обязательным участником формулирования отдельных заданий должен стать учитель. Психолог же обязан обеспечить соблюдение всех формальных процедур, требуемых для создания надежного и валидного инструмента, с помощью которого можно было бы осуществлять диагностику и проводить сопоставления по исследуемым качествам отдельных учащихся или их групп (классов, школ, регионов и т.д.).
Отдельные тесты достижений можно объединять в батареи, что позволяет получать профили показателей успешности обучения по разным школьным предметам. Как правило, тестовые батареи предназначены для разных образовательно-возрастных уровней и не всегда дают результаты, которые можно сопоставлять друг с другом для получения целостной картины успешности обучения от класса к классу. Наряду с ними созданы батареи, которые позволяют получать такие данные. Это, например, тесты основных навыков (штата Айова) и успехов в обучении, тесты достижений и тесты учебных навыков Стэнфордского университета и др
Рассмотрим в качестве примера Стэнфордский тест достижений (SAT), краткое описание которого приведено в книге А. Анастази (1982. Т. 2.). Разработанный в 1923 г., он неоднократно перерабатывался
Блоки батареи могут использоваться самостоятельно, 1 эффективности обучения по отдельным дисциплинам. Вот, например, какие субтесты входят в батарею SAT, предназначенную для детей 5 и 6 классов (с середины 5-го до окончания 6-го).
1. Словарь: изучает словарный запас с помощью устного предъявления незавершенных предложений с просьбой к ребенку выбрать из данных на выбор наиболее подходящее слово. Например: человек, который большую часть времени находится в плохом настроении, называется:
а) отшельник; б) актер; в) брюзга; д) учащийся. 2.
Понимание прочитанного: ребенка просят прочитать отрывок из прозы или стихотворения и к каждому задают серию вопросов. Для того чтобы дать правильные ответы, учащийся должен уметь выделять главную мысль отрывка, ключевые моменты текста, понимать его скрытый смысл, уметь делать выводы из прочитанного. 3.
Навыки анализа слов: ученик должен произнести зрительно предъявляемые ему отдельные буквы и их сочетания, составить слова из слогов. 4.
Математические понятия: изучает понимание математических терминов и систем обозначений и действий, например дробей, множеств, процентов и т д 5.
Математические вычисления: включает оценку умений действовать с числами (буквенные обозначения не используются). 6.
Применение математики: содержит типичные арифметические задачи, задания на 7.
измерения и составление графиков и др. 7.
Грамотность: нахождение неправильно написанных слов. 8.
Язык: требуется правильно использовать прописные буквы, формы глаголов и местоимений, верно строить предложения, соблюдать правила пунктуации и т.д. 9.
Социальные науки: требуется выполнение заданий на основе знаний из области истории, экономики, политики, социологии и др.
10. Естественные науки: содержит задания, выявляющие знание некоторых методов и терминов из области физики и биологии.
11. Понимание прослушанного: требуется прослушать текст и ответить на ряд вопросов.
В 1973 г. SAT был стандартизирован на национальной выборке школьников с 1 по 9 классы.
В США тесты достижений получили очень широкое распространение и используются не только в школе, но и в дошкольных учреждениях и для выборок взрослых людей (например, для определения уровня грамотности тех или иных слоев населения)
Что касается дошкольников, то наиболее актуальной задачей является определение готовности ребенка к обучению в школе. Готовность к школе обычно определяется по ряду параметров- по уровню овладения знаниями, развитию некоторых способностей, сформированности учебной мотивации, выраженности произвольности и др. Учитывается и сенсомоторное развитие дошкольника, его физическое, умственное развитие, умение выполнять указания взрослого. Широкую известность в США приобрела батарея, которая называется национальным тестом готовности (MRT) С его помощью диагностируется уровень овладения некоторыми важными для дальнейшего обучения понятиями (языковыми и количественными), такими, как умение выделять разные звуки, находить последовательность событий (в картинках).
В других тестах диагностируется уровень осведомленности ребенка в окружающем мире, овладение языком и основами математических понятий, понимание на слух. Некоторые психологи указывают на недостаточность изучения в основном интеллектуальной сферы и призывают больше внимания уделять изучению особенностей поведения ребенка.
Достаточно популярными в нашей стране являются тесты школьной зрелости Я. Йирасека и программа диагностики психологической готовности к школе, предложенная Н.И. Гуткиной (Н И Гуткина, 1993)
При составлении заданий теста достижений следует соблюдать ряд правил, которые позволят создать надежный, сбалансированный инструмент оценки успешности овладения определенными учебными дисциплинами или их разделами. Так, например, необходимо проанализировать содержание заданий с позиций равной представленное™ в тесте разных учебных тем, понятий, действий и т д. Тест не должен быть перегружен второстепенными терминами, несущественными деталями и не должен делать упор на механическую память, которая может быть задействована, если в тест включать точные формулировки из учебника или фрагменты из него. Задания теста должны быть сформулированы четко, кратко и недвусмысленно, чтобы все учащиеся однозначно
понимали смысл вопроса. Важно проследить, чтобы ни одно задание теста не могло служить подсказкой для ответа на другое.
Варианты ответов на каждое задание должны подбираться таким образом, чтобы исключались возможности простой догадки или отбрасывания заведомо неподходящего ответа.
Важно выбирать и наиболее приемлемую форму ответов на задания. Учитывая, что задаваемый вопрос должен быть сформулирован коротко, желательно также кратко и однозначно формулировать ответы. Например, удобна альтернативная форма ответов, когда учащийся должен подчеркнуть одно из перечисленных решений: "да"- "нет", "верно"-"неверно". Часто при составлении заданий в нем делаются пропуски, которые должен заполнить испытуемый, выбирая из представленного набора ответов верный (выше мы приводили пример задания из теста достижений с такой формой ответов). Обычно на выбор предлагается 4-5 вариантов ответа. Как и любой тест, этот вид должен удовлетворять всем необходимым критериям, обладать высокой надежностью и удовлетворительной валидностью.
Для диагностики успешности обучения в школе разрабатываются специальные методы, которые разными авторами называются тестами учебных достижений, тестами успешности, дидактическими тестами и даже тестами учителя (под последними могут также подразумеваться тесты, предназначенные для диагностики профессиональных качеств педагогов либо малоформализованные диагностические средства, которые может использовать учитель, такие как наблюдение, беседа и др.)- Как отмечает американский психолог А. Анастази, по численности этот тип тестов занимает первое место.
Тесты достижений предназначены для того, чтобы оценить успешность овладения конкретными знаниями и даже отдельными разделами учебных дисциплин и являются более объективным показателем обученности школьника, чем отметка. Последняя зачастую становится не только оценкой знаний учащегося, но и инструментом воздействия на него,
Практический задачи школьной психодиагностики
может выражать отношение учителя к степени его дисциплинированности, организованности, особенностям поведения и т. д. Тесты достижений лишены этих недостатков, разумеется при условии грамотного их составлении и применения.
Тесты достижений отличаются от собственно психологических тестов (способностей, интеллекта). Их отличие от тестов способностей состоит, во-первых, в том, что с их помощью изучают успешность овладения конкретным, ограниченным определенными рамками учебным материалом, например, разделом математики «стереометрия» или курсом английского языка. На формирование способностей (например, пространственных) влияние обучения также будет сказываться, но оно не является единственным фактором, определяющим уровень их развития. Поэтому при диагностике способностей трудно найти однозначное объяснение высокой или низкой степени их развитости у школьника. Во-вторых, различие между тестами определяется целями их применения. Тесты способностей направлены главным образом на выявление предпосылок к тем или иным видам деятельности и претендуют на прогнозирование выбора для индивида наиболее подходящей профессии или профиля обучения- Тесты же достижений применяются для оценки успешности овладения конкретными знаниями с целью определения эффективности программ, учебников и методов обучения, особенностей работы отдельных учителей, педагогических коллективов и т. д., то есть диагностируют прошлый опыт, результат усвоения тех или иных дисциплин или их разделов. Хотя нельзя отрицать того факта, что тесты достижений также могут в определенной степени предсказывать темпы продвижения учащегося в той или иной учебной дисциплине, поскольку имеющийся на момент тестирования высокий или невысокий уровень овладения знаниями не может не
Основы психодиагностики
отразиться на дальнейшем процессе обучения. Указывая на разницу в обсуждаемых типах тестов, А. Анастази отмечает, что она наиболее выпукло выступает при оценке их валидности: «Лучший способ оценить тесты способностей - это осуществить прогностическую критериально-ориентированную вали-дизацию, тогда как тесты достижений в основном оцениваются в терминах валидности по содержанию» (А. Анастази, 1982, т.2, с. 37).
Тесты достижений отличаются также и от тестов интеллекта. Последние направлены не на диагностику конкретных знаний или фактов, а требуют от учащегося умения совершать с понятиями (пусть даже и учебными) определенные умственные действия, такие как аналогий, классификации, обобщение и др. Это отражено и в формулировании конкретных заданий тестов того и другого типа. Например, тест достижений на материале истории определенного периода может содержать такие вопросы:
«Заполни пропуски в предложениях:
Вторая мировая война началась в........ году.
а) Польшу
б) Советский Союз
в) Францию
г) Венгрию».
В тесте же умственного развития вопросы с использованием понятий из истории будут иметь следующий вид:
«Вам даны пять слов. Четыре из них объединены общим признаком, пятое слово к ним не подходит. Его надо найти и подчеркнуть.
а) товар б) город в) ярмарка г)"натуральное хозяйство д) деньги
а) рабовладелец б) раб в) крестьянин г) рабочий д) ремесленник».
Для того, чтобы правильно ответить на вопросы, входящие в тест достижений, необходимы знания конкретных фактов, дат и др. Старательный ученик, обладающий хорошей памятью, без труда может найти правильные ответы в заданиях большинства тестов достижений. Однако, если у него плохо сформированы умения работать с понятиями, анализировать их, находить существенные признаки и т. д., то задания теста интеллекта могут вызвать значительные затруднения (поскольку для их выполнения одной хорошей памяти недостаточно). Необходимо владение целым рядом мыслительных операций, знание тех понятий, на материале которых составлены задания теста.
[Примечание редактора. В разделе 3.7 даются примеры того, как избежать буквальной зависимости успешности в тестах достижений от уровня развития «механической» памяти и основанного на ней поверхностно-ассоциативного мышления, как разрабатывать задания, требующие обнаружить понимание внутрипредметнои логики, т. е. концептуальное освоение материала.]
Наряду с тестами достижений, предназначенными для оценки усвоения знаний по конкретным дисциплинам или их циклам, в психологии разрабатываются и более широко ориентированные тесты. Это, например, тесты на оценку отдельных навыков, требующихся школьнику на разных этапах обуче-
Основы психодиагностики _____ "
ния, таких как некоторые общие принципы решения математических задач, анализа литературных текстов и др. Еще более широко ориентированными являются тесты для изучения умений, которые могут пригодиться при овладении рядом дисциплин, например, навыки работы с учебником, математическими таблицами, географическими картами, энциклопедиями и словарями. И, наконец, существуют тесты, направленные на оценку влияния обучения на формирование логического мышления, способности рассуждать, строить выводы на основе анализа определенного круга данных и т. д. Эти тесты в наибольшей степени приближаются по своему содержанию к тестам интеллекта и высоко коррелируют с последними. Поскольку тесты достижений предназначены для оценки эффективности обучения по конкретным предметам, то обязательным участником формулирования отдельных заданий должен стать учитель. Психолог же обязан обеспечить соблюдение всех формальных процедур, требуемых для создания надежного и валидного инструмента, с помощью которого можно было бы осуществлять диагностику и проводить сопоставления по исследуемым качествам отдельных учащихся или их групп (классов, школ, регионов и т. д.). То есть психолог должен выполнить роль методиста-тестолога.
Отдельные тесты достижений можно объединять в батареи, что позволяет получать профили показателей успешности обучения по разным школьным предметам. Как правило, тестовые батареи предназначены для разных образовательно-возрастных уровней и не всегда дают результаты, которые можно сопоставлять друг с другом для получения целостной картины успешности обучения от класса к классу. Наряду с ними созданы батареи, которые позволяют получать такие данные. Это, например, тесты основных навыков (штата Айова) и успехов в обуче-
Практические задачи школьной психодиагностики
нии, тесты достижений и тесты учебных навыков Стэнфордского университета и др.
Рассмотрим в качестве примера Стэнфордский тест достижений (SAT), краткое описание которого приведено в книге А. Анастази (А. Анастази, 1982 г., т.2, с.42-43). Разработанный в 1923 г., он неоднократно перерабатывался, и последний вариант появился в 1973 г. Проведение всей батареи занимает 4-5 часов и осуществляется в несколько приемов- Некоторые блоки батареи могут использоваться самостоятельно, для оценки эффективности обучения по отдельным дисциплинам. Вот, например, какие субтесты входят в батарею SAT, предназначенную.для детей 5 и 6-х классов (с середины 5-го до окончания 6-го):
1. Словарь: изучает словарный запас с помощью устного предъявления незавершенных предложений с просьбой к ребенку выбрать наиболее подходящее слово. Например, «Человек, который большую часть времени находится в плохом настроении, называется: а) отшельник б) актер в) брюзга д) учащийся»..
2. Понимание прочитанного: ребенка просят прочитать отрывок прозы или стихотворения и к каждому задают серию вопросов. Для того, чтобы дать правильные ответы, учащийся должен уметь выделить главную мысль отрывка, ключевые моменты текста, понимать его скрытый смысл, уметь делать выводы из прочитанного.
3. Навыки анализа слов: ученик должен произнести зрительно предъявляемые ему отдельные буквы и их сочетания, составить слова из слогов.
4. Математические понятия: изучает понимание математических терминов и систем обозначений и действий, например, дробей, множеств, процентов и
5. Математические вычисления: включает оценку умений действовать с числами (буквенные обоз-
Основы психодиагностики
начения не используются).
6. Применение математики: содержит типичные арифметические задачи, задания на измерения и составление графиков и др.
7. Грамотность: нахождение неправильно написанных слов.
8. Язык: требуется правильно использовать прописные буквы, формы глаголов и местоимений, верно строить предложения, соблюдать правила пунктуации и т. д.
9. Социальные науки: требуется выполнение заданий на основе знаний из области истории, экономики, политики, социологии и др.
10. Естественные науки: задания выявляют знания некоторых методов и терминов из области физики и биологии.
11. Понимание прослушанного: требуется прослушать текст и ответить на ряд вопросов.
В 1973 году SAT был стандартизован на национальной выборке школьников с 1-го по 9-й классы.
Следует отметить, что в США тесты достижений получили очень широкое распространение и используются не только в школе, но и в дошкольных учреждениях и для выборок взрослых людей (например, для определения уровня грамотности тех или иных слоев населения).
Что касается дошкольников, то наиболее актуальной задачей является определение готовности ребенка к обучению в школе. Здесь также широко могут использоваться тесты достижений (о других тестах, используемых в диагностике готовности к школе, см. 3.2). Широкую известность в США приобрела батарея, которая называется национальным тестом готовности (MRT). С его помощью диагностируется уровень овладения некоторыми важными для дальнейшего обучения понятиями (языковыми и
Практические задачи школьной психодиагностики
количественными), такими как умение выделять разные звуки, находить последовательность событий (в картинках). В других тестах диагностируется уровень осведомленности ребенка в окружающем мире, овладение языком и основами математических понятий, понимание на слух.
При составлении заданий теста достижений следует соблюдать ряд правил, которые позволяют создать надежный, сбалансированный инструмент оценки успешности овладения определенными учебными дисциплинами или их разделами (см. 3.7).
Ключевые термины: умственное развитие, тесты интеллекта, тесты достижений, социально-психологический норматив, качественный анализ, компьютерные тесты, осведомленность , аналогии, обобщение, классификация, числовые ряды.
Диагностика достижений представляет собой одну из самых обширных областей современной психологической диагностики. Основным методическим средством здесь служат тесты достижений (они же тесты успешности, тесты академических способностей тесты успеваемости). Тесты достижений являются диагностическим инструментом объективной оценки и контроля результатов образовательной или профессиональной подготовки.
Первые тесты достижений появились уже в период возникновения метода тестирования. В американский ученый Дж. М. Райе предложил тест для измерения степени эффективности длительного (восьмилетнего) обучения навыкам письма. Для сравнительной оценки успешности учащихся в орфографии при разных методах обучения им использовались специальные таблицы слов, с которыми соотносились результаты письменных работ свыше 60 тысяч учеников .
Социально-экономическая практика начала XX столетия, связанная с активным внедрением сложных механизмов в промышленное производство и возрастающими требованиями к подготовке образованных, знающих специалистов, вызвала необходимость создания государственной массовой системы образования с обязательным контролем качества обучения. В 1900 г. в США создается Комитет по проверке знаний абитуриентов колледжей.
Повсеместное внедрение тестов в систему образования США связано с именем профессора Колумбийского университета Э. Л. Торндайка. Под его руководством и при его непосредственном участии уже к 1915 г. были разработаны и опубликованы тесты по основным школьным предметам. В разработке данного комплекта тестов приняли участие ученики и последователи Э. Л. Торндайка: С. А. Куртис, Дж. С. Стоун, С. Вуди (тесты арифметики), Б. Букингем (тесты правописания).
В первые два десятилетия XX в. тесты достижений начали использоваться в образовательной и профессиональной практике США, Германии, Великобритании, России и других стран. В 1925 г. в Москве создается особая тестовая комиссия при педагогическом отделе Института методов школьной работы. В ее задачи входила разработка стандартизированных тестов для советской школы. В апреле 1927 г. на первой Всесоюзной конференции педологов опыт массового применения тестов получил самую горячую поддержку у специалистов по детскому развитию. В 1926-1927 гг. выходят первые учебники по теории и практике тестирования, издаются методические пособия и руководства по применению школьных тестов. Но с принятием 4 июля 1936 г. известного партийного постановления от 4 июля 1936 г. "О педологических извращениях в системе наркомпросов" тесты достижений, как и другие формы тестового контроля, надолго исчезают из отечественной образовательной практики и сложившейся системы профессионального отбора.
Вместе с тем в децентрализованной, прагматически ориентированной и поступательно развивающейся системе США тесты успешности получили более широкое распространение и интенсивно разрабатывались. На сегодняшний день тестовые методики в США рассматриваются в качестве универсального средства проверки знаний, умений, профессиональной подготовки во всех областях человеческой деятельности. Так, десятки тысяч внештатных счетчиков для проведения переписи 2000 г. отбирались среди добровольцев с помощью специальных тестов, направленных на проверку элементарных канцелярских навыков, умения писать и считать. Для допуска практически к любому занятию, требующему каких-то навыков и знаний, необходимо получение сертификата. Кандидатом на большинство федеральных правительственных постов нужно обязательно сдавать государственный гражданский экзамен, который проходит в тестовой форме. Во многих школах США учителей обязывают пройти процедуру стандартизированного тестирования, по результатам которого выдаются удостоверения, подтверждающие их профессиональные компетенции.
В процессе реформирования российской системы образования и ее интеграции в мировую образовательную практику тесты достижений переживают второе рождение. В 1998 г. Центром тестирования Минобразования России был начат эксперимент по проведению централизованного абитуриентского тестирования в вузы, который стимулировал создание и внедрение итоговых тестов достижений по отдельным дисциплинам. Опыт централизованного абитуриентского и репетиционного тестирования послужил основой для перехода к следующему этапу - Единому государственному тестовому экзамену выпускников средних школ, который в порядке эксперимента начал проводиться с 2001 г. С 2009 г. Единый государственный экзамен (ЕГЭ) становится основной формой итоговой аттестации выпускников российских школ. На сегодняшний день ЕГЭ включает в себя задания трех типов: А - с выбором правильного ответа из четырех предложенных (задания этого типа не представлены в тестах по математике, литературе и иностранным языкам); В - задания с кратким свободным ответом (указывается словосочетание, число или формула); С - в этих заданиях требуется дать развернутый свободный ответ (изложить доказательство, сделать математический вывод, написать эссе, дать оценку конкретной ситуации).
Результаты проходят статистическую обработку в Федеральном центре тестирования, и первичные баллы преобразуются в тестовый балл. Максимальное количество первичных баллов - 30, которые соответствуют 100 тестовым баллам. Каждый школьник может пройти тренировочные тесты ЕГЭ в онлайновом режиме. Представленные па сайте тесты по своей сложности и структуре идентичны реальным аттестационным экзаменам, проводившимся в предыдущие годы.
В современной образовательной практике тесты достижений представлены достаточно широко. Существуют и активно рекламируются компьютерные программы для разработки тестов достижений. Огромным тиражом издаются руководства и методические пособия по тестированию образовательных результатов. Для того чтобы ориентироваться в огромном массиве тестов и уметь их оценить в плане диагностической реализации, необходимо знать особенности этих тестов, подходы к их разработке и условия их обоснованного и психологически адекватного применения в школьном и профессиональном образовании.
- Кадиевский В. М. Генезис тестирования в истории отечественного образования. Омск: Ом ГУ, 2007.
Современные средства диагностики учебных достижений учащихся по русскому языку и литературе
Важной составной частью процесса обучения является диагностика качества знаний. Она позволяет оценить достижения ученика, сравнить работу преподавателей, выявить пробелы в знаниях, достоинства и недостатки методов обучения.
Для повышения качества обучения педагогу необходимо уметь грамотно выбирать и применять существующие формы и методы диагностики, четко определять цели и функции контроля. История развития контроля знаний насчитывает столько же лет, сколько вся педагогическая деятельность. Целью контроля является определение качества усвоения учащимися программного материала, диагностирование и корректирование их знаний.
Контроль присутствует практически в любом педагогическом процессе. Каждый педагог проверяет результативность обучения и выясняет причины слабой успеваемости. Применительно к повседневному учебному процессу под «контролем» понимают выявление и оценку результатов учебной деятельности обучающихся. Под словом «оценка» имеется в виду не только конечный результат, но и процесс формирования оценки.
В понятие «диагностика» вкладывается более широкий и более глубокий смысл, чем в понятие «контроль». Контроль лишь констатирует результаты, не объясняя их происхождения. Диагностика включает в себя контроль, проверку, учет, оценивание, накопление статистических данных, их анализ, рефлексию, выявление динамики образовательных изменений и личностных приращений ученика, переопределений целей, уточнение образовательных программ, корректировку хода обучения, прогнозирование дальнейшего развития событий.
Диагностика, выполняя функции обратной связи, позволяет педагогу контролировать образовательный процесс, оценивать результаты, корректировать свои действия, строить последующие этапы обучения на основе достигнутого, дифференцировать методы и задания с учетом индивидуального продвижения и развития учащихся.
Не менее важна обратная связь и для учащихся, так как помогает видеть свои недостатки и достижения, получить оценку своей деятельности и советы по ее корректированию.
I .Традиционные средства диагностики
В педагогике выделяются следующие основные виды контроля: текущий, тематический, итоговый.
Текущий контроль - это систематическая проверка и оценка
образовательных результатов ученика по конкретным темам на отдельных занятиях. Желательно, чтобы текущий контроль происходил на каждом уроке. Возможные формы такого контроля: опрос учителя, выполнение тестов, решение задач, работа с компьютерной программой, взаимоконтроль учеников в парах или группах, самоконтроль ученика и др.
Тематический контроль осуществляется по целому разделу учебного курса. Цель - диагностирование качества усвоения учеником структурных основ и взаимосвязей изученного раздела, его личностных образовательных приращений по выделенным ранее направлениям. Задача такого контроля - обучающая, поскольку ученики обучаются систематизации, обобщению, целостному видению крупного блока учебной информации и связанной с нею деятельности.
Итоговый контроль проводится в конце каждой четверти или учебного года. Он может иметь форму контрольной работы, зачета, экзамена, зашиты творческой работы, тестирование. Данный тип контроля предполагает комплексную проверку образовательных результатов по всем ключевым целям и направлениям. Не должно быть так, чтобы цели заявлялись одни, а итоговому контролю подлежали совсем другие параметры или только часть из них.
В соответствии с формами обучения на практике выделяются три формы контроля: индивидуальный, групповой и фронтальный.
При индивидуальном контроле каждый школьник получает свое задание, которое он должен выполнять без посторонней помощи. Эта форма целесообразна в том случае, если требуется выяснять индивидуальные знания, способности и возможности отдельных учащихся.
При групповом контроле класс временно делится на несколько групп (от 2 до 10 учащихся) и каждой группе дается проверочное задание. В зависимости от цели контроля группам предлагают одинаковые или дифференцированные задания, проверяют результаты письменно - графического задания, выполненного учениками по двое, или практического, которое выполняется каждой четверкой учащихся, или проверяют точность, скорость и качество выполнения конкретного задания по звеньям. Групповую форму организации контроля применяют при повторении с целью обобщения и систематизации учебного материала, при выделении приемов и методов решения задач, при акцентировании внимания учащихся на наиболее рациональных способах выполнения заданий, на лучшем из вариантов доказательства теоремы и т. п.
При фронтальном контроле задания предлагаются всему классу. В процессе этой проверки изучается правильность восприятия и понимания учебного
материала, качество словесного, графического предметного оформления, степень закрепления в памяти.
Для организации диагностики важно определить содержание и методы контроля, то есть выяснить, что именно и как будет контролироваться. В практике преподавания в настоящее время используются различные методы контроля качества знаний учащихся. Чаще всего применяются разные формы устной проверки и проведение разнообразных письменных работ.
При фронтальном устном опросе за короткое время проверяется состояние знаний учащихся всего класса по определенному вопросу или группе вопросов. Эта форма проверки используется для:
выяснения готовности класса к изучению нового материала,
определения сформированности понятий,
проверки домашних заданий,
поэтапной или окончательной проверки учебного материала, только что разобранного на уроке,
при подготовке к выполнению практических и лабораторных работ.
Индивидуальный устный опрос позволяет выявить правильность ответа по содержанию, его последовательность, самостоятельность суждений и выводов, степень развития логического мышления, культуру речи учащихся. Эта форма применяется для текущего и тематического учета, а также для отработки и развития экспериментальных умений учащихся. Причем устную проверку считают эффективной, если она направлена на выявление осмысленности восприятия знаний и осознанности их использования, если она стимулирует самостоятельность и творческую активность учащихся.
Устный опрос осуществляется на каждом уроке, хотя оценивать знания учеников не обязательно. Главным в контроле знаний является определение проблемных мест в усвоении учебного материала и фиксирование внимания учеников на сложных понятиях, явлениях, процессах.
В процессе устного опроса можно использовать коллективную работу класса, наиболее действенными приемами которой являются:
обращение с вопросом ко всему классу,
конструирование ответа,
рецензирование ответа,
оценка ответа и ее обоснование,
постановка вопросов ученику самими учащимися,
взаимопроверка,
самопроверка.
Для устного контроля можно использовать листы контроля знаний.
Письменный контроль эффективнее развивает логическое мышление, приучает к большей точности в ответах. Письменная проверка позволяет за короткое время проверить знания большого числа учащихся одновременно. Используется письменный контроль знаний учащихся в целях диагностики умения применять знания в учебной практике и осуществляется в виде диктантов, контрольных, проверочных и самостоятельных работ, тестов, рефератов.
Диктант
Диктант используется как форма опроса для контроля за усвоением проходимого материала, его обобщения и систематизации и выявления готовности учащихся к восприятию нового. Диктант обычно проводится в самом начале урока, состоит из двух вариантов. Текст вопросов простой, легко воспринимаемый на слух, требующий краткого ответа, несложных вычислений. Пауза между следующими друг за другом вопросами должна быть достаточной для записи ответов учащимися.
Самостоятельная работа
Традиционная форма контроля знаний, которая по своему назначению делится на обучающую самостоятельную работу и контролирующую. Самостоятельная работа творческого характера позволит не только проверить определенные знания, умения, но и развивать творческие способности учащихся. Самостоятельная работа является необходимым этапом любой темы. Как правило, она проводится после коллективного решения или обсуждения задач новой темы и обязательно предшествует контрольной работе по этой теме. Работа выполняется без помощи учителя.
Контрольная работа
Контрольные работы проводятся с целью определения конечного результата обучения по данной теме или разделу, контролировать знания одного и того же материала неоднократно. Целесообразно проводить контрольные работы различного вида. С помощью промежуточной контрольной работы учитель проверяет усвоение учащимися материала в период изучения темы. Итоговая контрольная работа проводится с целью проверки знаний и умений учащихся по отдельной теме, курсу. Домашняя контрольная работа дается 1-2 раза в учебном году. Она призвана систематизировать знания, позволяет повторить и закрепить материал. При ее выполнении учащиеся не ограничены временем, могут использовать любые учебные пособия, проконсультироваться у учителя, родителей, одноклассников. Каждому ученику дается свой вариант работы, в который включаются творческие задания для формирования разносторонней развитой личности.
Практическая работа
Для закрепления теоретических знаний и отработки навыков и умений, способности применять знания при решении конкретных задач используется практическая работа, которая связана не только с заданием на компьютере, но и, например, может включать задания построения схемы, таблицы, написания программы и т.д.
Лабораторная работа
Лабораторная работа - достаточно необычная форма контроля, она требует от учащихся не только наличия знаний, но еще и умений применять эти знания в новых ситуациях, сообразительности. Используется лабораторная работа для закрепления определенных навыков с программными средствами, когда кроме алгоритмических предписаний в задании учащийся может получать консультации учителя. Так как лабораторная работа может проверить ограниченный круг деятельности, ее целесообразно комбинировать с такими формами контроля, как диктант или тест.
Зачет
Зачет проводится для определения достижения конечных результатов обучения по определенной теме каждым учащимся. Перед началом изучения материала учащиеся знакомятся с перечнем вопросов и обязательных задач по теме, а также дополнительными вопросами и задачами. Иногда целесообразны закрытые зачеты, когда учащиеся получают вопросы и задания непосредственно во время проведения зачета. Его достоинство заключается в том, что он предполагает комплексную проверку всех знаний и умений учащихся. Необходимость такого тематического контроля обусловлена тем, что для каждого ученика характерен определенный темп овладения учебным материалом. А потому обычные контрольные работы, в которых трудно учесть должным образом индивидуальные особенности учащихся, могут оказаться недостаточными для того, чтобы судить, достигнуты ли планируемые результаты обучения.
Зачет - это одна из основных форм контроля в старших классах.
Тематические зачеты должны быть дифференцированными, чтобы ученик мог самостоятельно выбрать уровень зачета. Учитель решает, основываясь на результатах прошлых или промежуточных контрольных мероприятий, какие знания и умения целесообразно проверять у какого ученика: всем даются индивидуальные задания. Ученик может решать задачи, потом делать лабораторную работу, а затем беседовать с учителем.
Формы контроля могут быть разнообразны. Традиционные формы диагностики качества знаний основаны на непосредственном общении учителя с учеником. Это очень важно, ведь такой контроль выполняет обучающие функции, вооружает педагогов информацией об уровне знаний, опробелах в их подготовке и даже об эмоционально-психологическом состоянии класса. Но существующие традиционные формы диагностики не позволяют учителю осуществить регулярную обратную связь в обучении, проводить оперативную обработку информации и принимать соответствующие решения по коррекции учебного процесса.
Кроме того, контроль, проводимый традиционными формами, не лишен субъективизма, несмотря на рекомендуемые общие критерии оценки, уровень требований преподавателей различен. У каждого имеется свое понимание принципов требовательности и справедливости, свои критерии качества знаний. На оценку преподавателя влияют его личностные установки по отношению к оцениваемому ученику и предыдущий процесс общения с учащимся. Поэтому возникает необходимость в новых видах проверки знаний.
В последнее время в практику преподавания активно внедряется более объективная форма контроля - тестирование.
Преподаватели неоднозначно относятся к тестированию: одни являются активными сторонниками этого метода, повсеместно внедряют его и используют, а другие – не приемлют тесты, считая их недостойным инструментом контроля. Обычно, доводы, как сторонников, так и противников тестирования не отличаются достаточной аргументацией или научным обоснованием. Чаще всего и те и другие ссылаются на опыт США, где тестирование применяется повсеместно и является основным методом контроля знаний. Сторонники отмечают высокий уровень развития американского общества и науки в частности, а противники справедливо отмечают, что в большинстве своем, качество американского образования находится на невысоком уровне.
Тестирование с учетом ограничений и условий применимости имеет ряд преимуществ: объективность, возможность тренинга, технологичность, оперативность обработки результатов, возможность автоматизации диагностики качества знаний, обработка и накопление статистических данных, что ставит их на одно из ведущих мест в диагностике качества знаний.
Для диагностики успешности обучения в школе разрабатываются специальные методы, которые разными авторами называются тестами учебных достижений, тестами успешности, дидактическими тестами и даже тестами учителя (под последними могут также подразумеваться тесты, предназначенные для диагностики профессиональных качеств педагогов либо малоформализованные диагностические средства, которые может использовать учитель, такие как наблюдение, беседа и др.). Как отмечает американский психолог А. Анастази, по численности этот тип тестов занимает первое место.
Тесты достижений предназначены для того, чтобы оценить успешность овладения конкретными знаниями и даже отдельными разделами учебных дисциплин и являются более объективным показателем обученности школьника, чем отметка. Последняя зачастую становится не только оценкой знаний учащегося, но и инструментом воздействия на него, может выражать отношение учителя к степени его дисциплинированности, организованности, особенностям поведения и т. д. Тесты достижений лишены этих недостатков, разумеется при условии грамотного их составлении и применения.
Тесты достижений отличаются от собственно психологических тестов (способностей, интеллекта). Их отличие от тестов способностей состоит, во-первых, в том, что с их помощью изучают успешность овладения конкретным, ограниченным определенными рамками учебным материалом, например, разделом математики стереометрия или курсом английского языка. На формирование способностей (например, пространственных) влияние обучения также будет сказываться, но оно не является единственным фактором, определяющим уровень их развития. Поэтому при диагностике способностей трудно найти однозначное объяснение высокой или низкой степени их развитости у школьника. Во-вторых, различие между тестами определяется целями их применения. Тесты способностей направлены главным образом на выявление предпосылок к тем или иным видам деятельности и претендуют на прогнозирование выбора для индивида наиболее подходящей профессии или профиля обучения. Тесты же достижений применяются для оценки успешности овладения конкретными знаниями с целью определения эффективности программ, учебников и методов обучения, особенностей работы отдельных учителей, педагогических коллективов и т. д., то есть диагностируют прошлый опыт, результат усвоения тех или иных дисциплин или их разделов. Хотя нельзя отрицать того факта, что тесты достижений также могут в определенной степени предсказывать темпы продвижения учащегося в той или иной учебной дисциплине, поскольку имеющийся на момент тестирования высокий или невысокий уровень овладения знаниями не может неотразиться на дальнейшем процессе обучения. Указывая на разницу в обсуждаемых типах тестов, А. Анастази отмечает, что она наиболее выпукло выступает при оценке их валидности: Лучший способ оценить тесты способностей - это осуществить прогностическую критериально-ориентированную валидизацию, тогда как тесты достижений в основном оцениваются в терминах валидности по содержанию (А. Анастази, 1982, т.2, с. 37).
Тесты достижений отличаются также и от тестов интеллекта. Последние направлены не на диагностику конкретных знаний или фактов, а требуют от учащегося умения совершать с понятиями (пусть даже и учебными) определенные умственные действия, такие как аналогии, классификации, обобщение и др. Это отражено и в формулировании конкретных заданий тестов того и другого типа. Например, тест достижений на материале истории определенного периода может содержать такие вопросы:
Заполни пропуски в предложениях:
Вторая мировая война началась в........................................................ году.
а) Польшу
б) Советский Союз
в) Францию
г) Венгрию.
В тесте же умственного развития вопросы с использованием понятий из истории будут иметь следующий вид:
Вам даны пять слов. Четыре из них объединены общим признаком, пятое слово к ним не подходит. Его надо найти и подчеркнуть.
а) товар б) город в) ярмарка г) натуральное хозяйство д) деньги
а) рабовладелец б) раб в) крестьянин г) рабочий д) ремесленник,
Для того, чтобы правильно ответить на вопросы, входящие в тест достижений, необходимы знания конкретных фактов, дат и др. Старательный ученик, обладающий хорошей памятью, без труда может найти правильные ответы в заданиях большинства тестов достижений. Однако, если у него плохо сформированы умения работать с понятиями, анализировать их, находить существенные признаки и т. д., то задания теста интеллекта могут вызвать значительные затруднения (поскольку для их выполнения одной хорошей памяти недостаточно). Необходимо владение целым рядом мыслительных операций, знание тех понятий, на материале которых составлены задания теста.
[Примечание редактора. Далее даются примеры того, как избежать буквальной зависимости успешности в тестах достижений от уровня развития механической памяти и основанного на ней поверхностно-ассоциативного мышления, как разрабатывать задания, требующие обнаружить понимание внутрипредметной логики, т. е. концептуальное освоение материала.]
Наряду с тестами достижений, предназначенными для оценки усвоения знаний по конкретным дисциплинам или их циклам, в психологии разрабатываются и более широко ориентированные тесты. Это, например, тесты на оценку отдельных навыков, требующихся школьнику на разных этапах обучения, таких как некоторые общие принципы решения математических задач, анализа литературных текстов и др. Еще более широко ориентированными являются тесты для изучения умений, которые могут пригодиться при овладении рядом дисциплин, например, навыки работы с учебником, математическими таблицами, географическими картами, энциклопедиями и словарями. И, наконец, существуют тесты, направленные на оценку влияния обучения на формирование логического мышления, способности рассуждать, строить выводы на основе анализа определенного круга данных и т. д. Эти тесты в наибольшей степени приближаются по своему содержанию к тестам интеллекта и высоко коррелируют с последними. Поскольку тесты достижений предназначены для оценки эффективности обучения по конкретным предметам, то обязательным участником формулирования отдельных заданий должен стать учитель. Психолог же обязан обеспечить соблюдение всех формальных процедур, требуемых для создания надежного и валидного инструмента, с помощью которого можно было бы осуществлять диагностику и проводить сопоставления по исследуемым качествам отдельных учащихся или их групп (классов, школ, регионов и т. д.)- То есть психолог должен выполнить роль методисту-тестолога.
Отдельные тесты достижений можно объединять в батареи, что позволяет получать профили показателей успешности обучения по разным школьным предметам. Как правило, тестовые батареи предназначены для разных образовательно-возрастных уровней и не всегда дают результаты, которые можно сопоставлять друг с другом для получения целостной картины успешности обучения от класса к классу. Наряду с ними созданы батареи, которые позволяют получать такие данные. Это, например, тесты основных навыков (штата Айова) и успехов в обучении, тесты достижений и тесты учебных навыков Стэнфордского университета и др.
Рассмотрим в качестве примера Стэнфордский тест достижений (SAT), краткое описание которого приведено в книге А. Анастази (А. Анастази, 1982 г., т.2, с.42-43). Разработанный в 1923 г., он неоднократно перерабатывался, и последний вариант появился в 1973 г. Проведение всей батареи занимает 4-5 часов и осуществляется в несколько приемов- Некоторые блоки батареи могут использоваться самостоятельно, для оценки эффективности обучения по отдельным дисциплинам. Вот, например, какие субтесты входят в батарею SAT , предназначенную для детей 5 и 6-х классов (с середины 5-го до окончания 6-го):
1. Словарь: изучает словарный запас с помощью устного предъявления незавершенных предложений с просьбой к ребенку выбрать наиболее подходящее слово. Например, Человек, который большую часть времени находится в плохом настроении, называется: а) отшельник б) актер в) брюзга д) учащийся.
2.Понимание прочитанного: ребенка просят прочитать отрывок прозы или стихотворения и к каждому задают серию вопросов. Для того, чтобы дать правильные ответы, учащийся должен уметь выделить главную мысль отрывка, ключевые моменты текста, понимать его скрытый смысл, уметь делать выводы из прочитанного.
3.Навыки анализа слов: ученик должен произнести зрительно предъявляемые ему отдельные буквы и их сочетания, составить слова из слогов.
4. Математические понятия: изучает понимание математических терминов и систем обозначений и действий, например, дробей, множеств, процентов и т. д.
5. Математические вычисления: включает оценку умений действовать с числами (буквенные обозначения не используются).
6.Применение математики: содержит типичные арифметические задачи, задания на измерения и составление графиков и др.
7. Грамотность: нахождение неправильно написанных слов.
8. Язык: требуется правильно использовать прописные буквы, формы глаголов и местоимений, верно строить предложения, соблюдать правила пунктуации и т. д.
9.Социальные науки: требуется выполнение заданий на основе знаний из области истории, экономики, политики, социологии и др.
10. Естественные науки: задания выявляют знания некоторых методов и терминов из области физики и биологии.
11.Понимание прослушанного: требуется прослушать текст и ответить на ряд вопросов.
В 1973 году SAT был стандартизован на национальной выборке школьников с 1-го по 9-й классы.
Следует отметить, что в США тесты достижений получили очень широкое распространение и используются не только в школе, но и в дошкольных учреждениях и для выборок взрослых людей (например, для определения уровня грамотности тех или иных слоев населения).
Что касается дошкольников, то наиболее актуальной задачей является определение готовности ребенка к обучению в школе. Здесь также широко могут использоваться тесты достижений (о других тестах, используемых в диагностике готовности к школе). Широкую известность в США приобрела батарея, которая называется национальным тестом готовности (MRT). С его помощью диагностируется уровень овладения некоторыми важными для дальнейшего обучения понятиями (языковыми и количественными), такими как умение выделять разные звуки, находить последовательность событий (в картинках). В других тестах диагностируется уровень осведомленности ребенка в окружающем мире, овладение языком и основами математических понятий, понимание на слух.
При составлении заданий теста достижений следует соблюдать ряд правил, которые позволяют создать надежный, сбалансированный инструмент оценки успешности овладения определенными учебными дисциплинами или их разделами.
Ключевые термины: умственное развитие, тесты интеллекта, тесты достижений, социально-психологический норматив, качественный анализ, компьютерные тесты, осведомленность, аналогии, обобщение, классификация, числовые ряды.