РОССИЙСКАЯ АКАДЕМИЯ ОБРАЗОВАНИЯ
ИНСТИТУТ ОБЩЕГО СРЕДНЕГО ОБРАЗОВАНИЯ
Центр оценки качества образования
ОСНОВНЫЕ РЕЗУЛЬТАТЫ
международного исследования образовательных достижений учащихся
PISA-2000
(краткий отчет)
Москва, 2002
|
РОССИЙСКАЯ АКАДЕМИЯ ОБРАЗОВАНИЯ ИНСТИТУТ ОБЩЕГО СРЕДНЕГО ОБРАЗОВАНИЯ Центр оценки качества образования
ОСНОВНЫЕ РЕЗУЛЬТАТЫ международного исследования образовательных достижений учащихся PISA-2000 (краткий отчет)
Москва, 2002 |
Авторы: Ковалева Г.С., к.п.н., Красновский Э.А., к.п.н., Краснокутская Л.П., к.ф.-м.н., Краснянская К.А., к.п.н.
Национальный координатор исследования PISA в России - Ковалева Г.С.
Координатор по "грамотности чтения" - Красновский Э.А.
Координатор по "математической грамотности" - Краснянская К.А.
Координатор по "естественнонаучной грамотности" - Ковалева Г.С.
Координатор по формированию выборки школ и учащихся - Найденова Н.Н.
Проверка работ - сотрудники ИОСО РАО, учителя школ г. Москвы и Московской области (Гущина О.В., Дюкова С.Е., Кошеленко Н.Г., Нурминская Н.В., Украинский Д.Л., Мягкова А.Н., Урядникова Т.В., Печерикина Л.Н. , Федорова Л.И., Исмайлова Г.Г., Тиман О.В., Ловкова Е.Ю., Крылова Л.Н., Михеева Т.Ф., Михеева Л.Н., Ханина О.И.)
Ввод данных, статистическая обработка результатов - Баранова В.Ю., Каменщикова Е.К., Кошеленко Н.Г., Найденова Н.Н., Нурминская Н.В.
Оформление отчета - Баранова В.Ю., Кошеленко Н.Г.
В кратком отчете представлены основные результаты международного сравнительного исследования образовательных достижений PISA (Programme for International Student Assessment) в области функциональной грамотности пятнадцатилетних учащихся. Приводятся данные о результатах учащихся России в сравнении со своими сверстниками из других стран-участниц программы. В приложениях представлена информация о российских участниках исследования и примеры заданий, проверяющих грамотность чтения, математическую и естественнонаучную грамотность.
Отчет предназначен для широкого круга лиц: представителей органов управления образованием разного уровня; специалистов, занимающихся проблемами оценки качества образования; специалистов в области школьного естественно-математического и филологического образования. Представленные материалы могут быть полезны учителям школ и студентам педагогических вузов.
Ó Центр оценки качества образования ИОСО РАО, 2002 г.
Предисловие
Принимая решение об участии в международной программе по оценке образовательных достижений учащихся PISA (Programme for International Student Assessment) в области функциональной грамотности пятнадцатилетних учащихся, специалисты Российской академии образования и Министерства образования РФ руководствовались следующими соображениями:
Российские участники международного исследования понимали, что в его итоге могут быть получены невысокие результаты как в силу особенностей процесса обучения в отечественной школе, так и в силу сложившейся практики аттестации образовательных достижений школьников. Так, недостаточно высокими оказались результаты российских школьников в недавно проведенных исследованиях математической, естественнонаучной и граждановедческой грамотности в 1995 и 1999-2000 годы.
Вместе с тем, необходимость определения направлений модернизации российской школы требует объективной информации о состоянии образования страны в сравнении с другими странами мира, полученной на основе инструментария, отражающего мировые приоритеты в области образования. Международная программа по оценке образовательных достижений учащихся PISA и является примером научно-педагогического исследования, основная задача которого - анализ реальных результатов и извлечение из них по возможности точных и созидательных для образовательной политики выводов.
Краткая информация об исследовании
Международная программа по оценке образовательных достижений учащихся PISA (Programme for International Student Assessment) осуществляется Организацией Экономического Сотрудничества и Развития ОЭСР (OECD - Organization for Economic Cooperation and Development). Цель исследования, как отражено в документах проекта, оценить, обладают ли учащиеся, получившие общее обязательное образование, знаниями и умениями, необходимыми для полноценного функционирования в обществе. Дополнительно к оценке учебных достижений изучалось отношение учащихся к обучению. Важным результатом исследования также явились полученные международные сравнительные показатели, которые раскрывают влияние отдельных факторов, связанных со школой и семьями учащихся, на уровень их образовательных достижений.
Следует обязательно подчеркнуть, что основные направления исследования, концептуальные подходы к разработке инструментария, способы обработки и представления результатов обсуждались и утверждались представителями стран-участниц проекта (как правило, представителями министерств образования) с учетом их практической значимости для этих стран.
Объектом исследования стали образовательные достижения учащихся 15-летнего возраста. Выбор этих учащихся объясняется тем, что во многих странах к этому возрасту завершается обязательное обучение в школе и программы обучения в разных странах имеют много общего. Именно на данном этапе образования важно определить состояние тех знаний и умений, которые могут быть полезны учащимся в будущем, а также способности самостоятельно приобретать знания, необходимые для успешной адаптации в современном мире.
Исследование образовательной подготовки учащихся проводилось в трех направлениях: изучались "грамотность чтения", "математическая грамотность" и "естественнонаучная грамотность". Особое внимание уделялось оценке овладения учащимися различными стратегиями обучения, умению использовать свои знания в разнообразных жизненных ситуациях, а также оценке межпредметной компетентности учащихся (использованию знаний, полученных в рамках изучения отдельных предметов или из других источников информации, для решения поставленной задачи).
Исследование проводится трехлетними циклами. В каждом цикле основное внимание (две трети времени тестирования) уделяется одному из трех указанных выше направлений исследования. По двум другим - планируется получить лишь информацию о некоторых приобретенных учащимися умениях. В 2000 г. основным направлением исследования была "грамотность чтения", в 2003 г. таким направлением будет "математическая грамотность", в 2006 - "естественнонаучная грамотность".
Программа осуществляется Консорциумом, состоящим из ведущих международных научных организаций при участии национальных центров и организации ОЭСР. Руководит работой Консорциума Австралийский Совет педагогических исследований (The Australian Council for Educational Research - ACER). В Консорциум входят следующие организации: Нидерландский Национальный Институт Педагогических Измерений (Netherlands National Institute for Educational Measurement - CITO); Служба педагогического тестирования США (Educational Testing Service, ETS), Национальный институт исследований в области образования (National Institute for Educational Research, NIER) в Японии, Вестат США (WESTAT).
Участники исследования в России
В исследовании функциональной грамотности молодежи 15-летнего возраста участвовало 6701 обучающийся из 250 образовательных учреждений 46 регионов России. Эта выборка является представительной для изучавшегося контингента школьников. Их них около 75% находились в системе общего образования. 25% выборки составляли студенты профессиональных училищ, техникумов и колледжей. Отметим, что всего в данном исследовании участвовало около 265000 учащихся из 32 стран мира.
В России исследование проводилось Центром оценки качества образования Института общего среднего образования Российской академии образования при активном участии Министерства образования РФ, органов управления образованием 46 субъектов РФ и различных региональных организаций, занимающихся проблемами образования (см. Приложение 1).
Краткая характеристика инструментария
Инструментарий исследования разрабатывался в процессе интерактивной деятельности консорциума, различных международных экспертных комиссий и ведущих специалистов участвующих стран. Окончательный вариант международного теста включал 37 групп заданий-вопросов по чтению (всего 141 вопрос), 16 групп заданий по математике (всего 32 вопроса) и 14 групп заданий по естествознанию (всего 35 вопросов). Задания были разделены на 9 вариантов, часть заданий при этом повторялась в нескольких вариантах. Каждый ученик должен был письменно за 2 часа ответить на 50-60 вопросов по чтению, математике и естествознанию. В тестах использовались задания с готовыми ответами, из которых надо было выбрать верный ответ, а также задания со свободными ответами, на которые учащийся должен был дать собственный краткий или развернутый обоснованный ответ. Некоторые задания (комплексные или структурированные) состояли из нескольких вопросов различной трудности, которые относились к одной и той же жизненной ситуации, представленной в тексте.
После выполнения теста каждый ученик заполнял в течение получаса анкету, в которой отвечал на вопросы о своем образовательном учреждении, о семье, своих отношениях и интересах. Дополнительно проводилось анкетирование директоров образовательных учреждений.
Исследование проводилось в строгом соответствии с едиными инструкциями и правилами, разработанными международным координационным центром для стандартизации технологии проведения исследования во всех странах-участницах проекта. Каждый этап исследования (формирование выборки, перевод и адаптация инструментария, проведение тестирования и анкетирования, проверка и обработка данных) контролировался международными экспертами. Например, переводы тестов и анкет перепроверялись переводчиками международного класса. Во время проведения тестирования в отдельных школах присутствовали наблюдатели. Выполнение тестов каждой четвертой тетради перепроверялось четыре раза независимыми экспертами, а затем часть из этих тетрадей перепроверялась международными экспертами. Задания, по которым эксперты в странах-участницах давали несогласованные оценки, исключались из анализа.
Как оценивались результаты
За выполнение теста каждому учащемуся приписывался балл по международной 1000-балльной шкале, отдельно за выполнение каждой группы заданий (по чтению, математике и естествознанию). Каждому заданию также приписывался определенный балл (трудность задания) по той же шкале в зависимости от того, насколько успешно данное задание выполнялось всеми тестируемыми. Международная шкала имела следующие характеристики: среднее значение было равно 500 баллам, стандартное отклонение - 100, что означало, что около 2/3 учащихся всех участвовавших в исследовании стран имели результаты в пределах от 400 до 600 баллов.
С некоторой степенью вероятности можно было считать, что балл каждого тестируемого показывал, какие задания (самые трудные) наиболее вероятно может выполнить данный ученик. Средний балл для каждой страны показывал, какие задания (самые трудные) наиболее вероятно может выполнить средний ученик данной страны.
В сводных таблицах отчета приводятся средние результаты всех стран-участниц по 1000-балльной шкале, стандартная ошибка измерения, а также возможное положение (место) страны при ранжировании стран (возможное высшее и низшее положение страны) с вероятностью 95%. Так как исследование проводилось на представительной выборке учащихся, то его результаты характеризуются определенным уровнем достоверности. Указание двух возможных положений страны также связано с тем, что средние результаты некоторых стран очень близки между собой.
Следует также пояснить, что при анализе результатов отдельных стран и построении международной шкалы учитывались особенности выполнения заданий в отдельных странах. Если по ряду заданий были получены противоречивые данные в отдельных странах и эти результаты не могли быть объяснены экспертами, то такие задания исключались из международного анализа для всех стран или только для одной или нескольких стран. Исключались из анализа также задания, в которых были допущены ошибки, например, полиграфические. Так, из банка заданий по чтению, включающего 150 заданий, при построении международной шкалы использовалось 141 задание (9 из них с нестабильными статистическими характеристиками были исключены из окончательных расчетов).
Основные результаты исследования
В данном отчете представлены основные результаты, которые вошли в международный отчет, описывающий результаты первичного анализа. В 2002 г. планируется подготовить несколько тематических международных отчетов после проведения дополнительного многофакторного анализа.
Наряду с международными данными в отчете представлены результаты по отдельным образовательным учреждениям, участвовавшим в российской выборке. Эти данные обработаны по единой методике и представлены на единой международной шкале. Результаты дополнительного анализа российских данных будут представлены позже.
Грамотность чтения
Под грамотностью чтения в исследовании понималась способность человека к осмыслению письменных текстов и рефлексии на них, к использованию их содержания для достижения собственных целей, развития знаний и возможностей, для активного участия в жизни общества. Таким образом, термин "грамотность чтения" в исследовании имеет широкий смысл. Как было определено в исследовании, оценивалась не техника чтения, а способность ученика использовать чтение как средство приобретения новых знаний для дальнейшего обучения.
Цели исследования отражали современное представление о "грамотности чтения". Согласно этому представлению, выпускник основной школы должен понимать тексты различных видов, размышлять над их содержанием, оценивать их смысл и значение и излагать свои мысли о прочитанном. Предлагаемые тексты были типичны для различных жизненных ситуаций. Это были тексты разных видов и жанров: отрывки из художественных произведений, биографии, тексты развлекательного характера, личные письма, документы, статьи из газет и журналов, деловые инструкции, рекламные объявления, товарные ярлыки, географические карты и др. В них использовались различные формы представления информации: диаграммы, рисунки, карты, таблицы и графики. В таблице 1 дается характеристика заданий, используемых для оценки грамотности чтения. Задания подразделяются по структуре используемого текста, видам деятельности, которые должны продемонстрировать учащиеся при работе с текстом, а также по типу текста и его контексту. Всего в исследовании использовалось 37 групп заданий, включающих 150 отдельных вопросов. (В международном анализе использовался только 141 вопрос).
Литературные и научно-популярные тексты являлись основой для выполнения 89 заданий-вопросов из 141, что составляет 63% всех заданий по чтению. Другие формы представления информации (графики, диаграммы, таблицы, рекламы, схемы, карты и т.д.) составляют 37%.
Оценивались различные когнитивные умения, которые можно было объединить в три группы:
- нахождение в тексте информации, заданной в явном или неявном виде;
- интерпретация текста;
- рефлексия и оценка текста.
Каждый ученик получал балл за выполнение заданий каждой группы умений, затем эти три балла объединялись в один общий балл. На основе этих четырех баллов для каждого ученика определялся уровень сформированности умений работать с текстами - "грамотность чтения". Каждому уровню соответствовали определенные задания, выполнение которых свидетельствовало о его достижении. Для сравнения стран использовались средние результаты для всех учащихся страны, а также данные о достижении учащимися этой страны различных уровней подготовки.
Таблица 1. Характеристики заданий для оценки грамотности чтения
|
Характеристики заданий |
Число заданий |
Число заданий с выбором ответа |
Число комплексных заданий с выбором ответа |
Число заданий с закрытыми свободно-конструи-руемыми ответами |
Число заданий с открытыми свободно-конструи-руемыми ответами |
Число заданий с кратким ответом |
|
Структура текста | ||||||
|
Сплошной |
89 |
42 |
3 |
3 |
34 |
7 |
|
Несплошной |
52 |
14 |
4 |
12 |
9 |
13 |
|
Всего |
141 |
56 |
7 |
15 |
43 |
20 |
|
Вид деятельности | ||||||
|
Интерпретация текста |
70 |
43 |
3 |
5 |
14 |
5 |
|
Рефлексия и оценка |
29 |
3 |
2 |
- |
23 |
1 |
|
Нахождение информации |
42 |
10 |
2 |
10 |
6 |
14 |
|
Всего |
141 |
56 |
7 |
15 |
43 |
20 |
|
Тип текста | ||||||
|
Реклама |
4 |
- |
- |
- |
1 |
3 |
|
Аргументация |
18 |
7 |
1 |
2 |
8 |
- |
|
Графики и диаграммы |
16 |
8 |
- |
2 |
3 |
3 |
|
Описание |
13 |
7 |
1 |
- |
4 |
1 |
|
Объяснение |
31 |
17 |
1 |
- |
9 |
4 |
|
Формы |
8 |
1 |
1 |
4 |
1 |
1 |
|
Инструкции |
9 |
3 |
- |
1 |
5 |
- |
|
Карты |
4 |
1 |
- |
- |
1 |
2 |
|
Повествование |
18 |
8 |
- |
- |
8 |
2 |
|
Схемы |
5 |
2 |
2 |
- |
- |
1 |
|
Таблицы |
15 |
2 |
1 |
6 |
3 |
3 |
|
Всего |
141 |
56 |
7 |
15 |
43 |
20 |
|
Контекст | ||||||
|
Образовательный |
39 |
22 |
4 |
1 |
4 |
8 |
|
Профессиональный |
22 |
4 |
1 |
4 |
9 |
4 |
|
Личный |
26 |
10 |
- |
3 |
10 |
3 |
|
Социальный |
54 |
20 |
2 |
7 |
20 |
5 |
|
Всего |
141 |
56 |
7 |
15 |
43 |
20 |
Для понимания и интерпретации результатов приведем несколько примеров заданий разного уровня из международного теста. Полный вариант текста и вопросов к нему по трем группам заданий дается в приложении 2.
Весьма характерным для образования школьников в большинстве стран мира и для проведения исследования было задание, в котором испытуемым предлагалось осмыслить и сопоставить два различных высказывания на одну тему, а именно, о таком юношеском увлечении, как граффити - рисунки или надписи на стенах или других местах, выполненных без официального разрешения.
В первом вопросе из группы заданий "Граффити" учащихся спрашивали о целях обоих писем о граффити и предлагали выбор из четырех возможных вариантов ответа. Верно ответили на этот вопрос 64% российских учащихся.
Вопрос 2 (более трудный) требовал свободного, хотя и краткого ответа и был направлен на установление связей в тексте. Автор одного из писем в защиту граффити вспоминала рекламу, о размещении которой никто "не спрашивает разрешения" у потребителя. О смысле такого упоминания и задавался вопрос. 40% российских участников верно ответили на вопрос, 42% - неверно (не поняли смысла упоминания о рекламе).
Средней трудности по установленной шкале был вопрос 3, в котором нужно было дать обоснование собственной точки зрения на граффити, используя сказанное в письмах. Не смогли сделать этого 29% российских учащихся. Справились с заданием более 55%. Задание 4, в котором надо было сопоставить стиль каждого письма, указав на то из них, которое считают лучшим (независимо от согласия с позицией автора), выполнили 31% наших учащихся. Не приступили к его выполнению почти 23% учащихся. Затруднения испытывали 46% учащихся, подменив вопрос, не поняв его цели и содержания.
Характерными для исследования были задания, основанные на диаграмме, демонстрирующей структуру работоспособного населения в некоторой стране ("Рабочая сила"). С такими текстами наши учащиеся встречаются на уроках истории и обществоведения весьма редко. Но главное - они выступают не как материал для упражнений, а как иллюстративный материал.
Часть вопросов этого задания (вопросы 1, 2 и 4) направленны на прямое обнаружение информации в диаграмме, установление связей между частями ее содержания. На эти вопросы правильно ответили 55-60% наших учащихся. Вопрос 3 представляет собой познавательную задачу: людей по их описанию (возраст, сфера занятий и др.) надо было отнести к той или иной группе населения, указанной в диаграмме. Трудность этого комплексного задания по международной шкале была достаточно высокой. И именно на этот вопрос учащиеся ответили слабо (от 6% до 29,5% правильных ответов о каждом из примеров людей).
Типичными для проведенного исследования были задания к тексту, получившему название "Научное оружие полиции" ("Полиция"). Текст представляет собой авторскую статью, в которой в популярной форме рассказывается о том, как генетический анализ может помочь при доказательстве совершенных преступлений. Автор, объясняя, что такое ДНК, прибегает к упрощающему суть, но образному сравнению набора генов с ожерельем цветных жемчужин, нанизанных в особом порядке, который "сохраняется во всех клетках тела каждого человека: он одинаков и в корнях волос, и в большем пальце ноги, и в печени, и в желудке, и в крови". Поэтому, как пишет автор, "ДНК служит своего рода генетическим удостоверением личности". Статья сопровождается тремя маленькими статьями научно-популярного характера. В одной из них, названной "Мы состоим из миллиарда клеток", объясняется что "у каждой клетки есть мембрана и ядро, в котором находится ДНК". В другой ("Генетическое удостоверение?") повторяется мысль, что набор генов "образует генетическое удостоверение личности человека". Наконец, в третьей, самой развернутой ("Как распознается генетическое удостоверение личности"), достаточно подробно рассказывается, как и с помощью каких методов производится анализ клеток для получения образца ДНК.
Таким образом, испытуемый оказывается достаточно осведомленным о сути генетических анализов, чтобы быть готовым ответить на предлагаемые ему вопросы. Задача осложняется необходимостью обратиться к различным материалам, предоставленным ему для размышлений.
Простейший вопрос 3 был обращен к статье автора и звучал так: "Какова главная цель автора?" Правильным был ответ: "информировать читателей", что подтверждалось и самим информационным жанром статьи. Именно так ответило 73% наших испытуемых. Отметим, что все же 13% из них выделили отвлекающий от сути рассказа ответ: "убедить".
Более сложным был вопрос 1 о том, как варьируются "жемчужные ожерелья" генов у разных людей. Выбрали верный ответ, что у разных людей "различается порядок жемчужин", 59% учащихся.
Такой же по сложности вопрос 2 был обращен к учебной статье "Как распознается генетическое удостоверение личности". Цель этой статьи - "объяснить, как производится анализ клеток для получения образца ДНК" - верно была отмечена лишь 36% учащихся. 39% из них искали в статье доказательства виновности подозреваемого в преступлении, что полностью расходится с сущностью излагаемого.
Наконец, в последнем задании 4 задавался вопрос, который интриговал испытуемых уже вступлением к статье, а именно, каким путем, судя по всем представленным материалам, следователи пытались найти ответ о виновности подозреваемого. Составители этого задания предполагали выполнение сложной деятельности по интегрированию информации из различных частей текста. Верно ответили на вопрос о главном средстве доказательства - проведении генетических анализов - 82% российских учащихся. К сожалению, успешное выполнение этого задания и ряда других заданий не оказали влияния на весьма слабые результаты российских подростков, обнаруженные в ходе исследования грамотности чтения в целом, о причинах чего будет сказано ниже.
Результаты выполнения международного теста по чтения по международной шкале приводятся в таблице 2.
По сравнению со средними результатами стран-членов ОЭСР страны делятся на три группы:
- страны, результаты которых статистически значимо выше средних результатов для стран ОЭСР (Финляндия, Канада, Новая Зеландия, Австралия, Ирландия, Корея, Великобритания, Япония, Швеция, Австрия, Бельгия, Исландия, всего 12 стран);
- страны, результаты которых сравнимы со средними для стран ОЭСР (Норвегия, Франция, США, Дания, Швейцария, 5 стран);
- страны, результаты которых статистически значимо ниже средних результатов для стран ОЭСР (Испания, Чешская Республика, Италия, Германия, Лихтенштейн*, Венгрия, Польша, Греция, Португалия, Российская Федерация*, Латвия*, Люксембург, Мексика, Бразилия*, 14 стран).
По уровню сформированности умений работать с текстами страны показали различные результаты. В исследовании было выделено 5 уровней (см. Таблицу 2).
Самый высокий уровень 5 (понимание сложных текстов, оценка представленной информации, формулирование гипотез и выводов и др.) продемонстрировали в среднем 10% учащихся всех стран. В лидирующих странах процент учащихся, достигших самого высокого уровня (5), составил от 15 до 19%. В России таких учащихся оказалось 3%. Достижение данного уровня проверялось исключительно заданиями со свободным ответом или комплексными и структурированными заданиями (составными из нескольких более простых заданий). Примером такого задания является вопрос 3 к текстам "Рабочая сила" (Приложение 2).
Уровень 4 предполагал способность выполнять комплексные задания с текстом, осуществлять критический анализ текста. Этого уровня в среднем достигли 22% учащихся всех стран ОЭСР. В России таких учащихся - 13%. В основном для выявления этого уровня использовались задания со свободным ответом, например, "Граффити", вопрос 4.
Уровень 3 предполагал способность выполнять задания средней сложности, например, обобщать информацию, расположенную в различных частях текста, соотносить текст со своим жизненным опытом, понимать информацию, заданную в неявном виде. Для оценки достижения данного уровня использовались в равной степени задания разного типа (с выбором ответа и со свободным ответом), например, "Граффити" - вопрос 4, "Рабочая сила" - вопрос 5, "Полиция" - вопросы 1-2. Третьим уровнем "грамотности чтения" овладели 29% учащихся стран ОЭСР и 27% российских учащихся.
Уровень 2 соответствовал способности выполнять задания, считающиеся базовыми, например, найти информацию, заданную в явном виде, сделать простой вывод на основе прочитанного, выявить смысл основных частей текста, продемонстрировать понимание текста, высказать свою точку зрения, обосновав ее фрагментами из текста. Достижение второго уровня оценивалось преимущественно с помощью заданий с выбором ответа, однако также использовались задания со свободными ответами ("Граффити" вопросы 1, 3; "Рабочая сила" вопросы 2, 4). Второй уровень "грамотности чтения" обнаружили 22% учащихся стран ОЭСР и 29% учащихся России.
Самый низкий уровень 1 включал базовые умения, например, нахождение в тексте простой информации, заданной в явном виде, или интерпретация текста с целью определения основной темы или идеи всего текста. Достижение этого уровня оценивалось с помощью заданий с выбором ответа. Примерами таких заданий являются вопросы 3-4 к текстам "Полиция". Уровень 1 продемонстрировали в среднем 12% учащихся стран ОЭСР. По мнению международных экспертов, эти учащиеся имеют достаточные пробелы в умениях работать с текстами, что в дальнейшем затруднит для них получение полноценного образования. В России таких учащихся 15-летнего возраста оказалось 18%.
Во всех странах имеются учащиеся, продемонстрировавшие уровень ниже первого. В среднем по странам таких учащихся 6%, в России - 9%.
Обобщенный результат России в "грамотности чтения" составил 462 балла. Пятнадцатилетние подростки, обучающиеся в образовательных учреждениях системы общего и профессионального образования, заняли 27-29 место из 32 стран, участвовавших в исследовании.
По сравнению с результатами России страны можно разделить на три группы:
- страны, результаты которых статистически значимо выше российских (Финляндия, Канада, Новая Зеландия, Австралия, Ирландия, Корея, Великобритания, Япония, Швеция, Австрия, Бельгия, Исландия, Норвегия, Франция, США, Дания, Швейцария, Испания, Чешская Республика, Италия, Германия, Лихтенштейн, Венгрия (всего 23 страны)
- страны, результаты которых сравнимы с российскими (Польша, Греция, Португалия и Латвия, 4 страны);
- страны, результаты которых ниже российских (Люксембург, Мексика и Бразилия, 3 страны).
Анализ результатов российских учащихся, продемонстрировавших самые высокие результаты в нашей стране, в сравнении со средними международными результатами показал, что лидирующие российские учащиеся значительно уступают своим лидирующим сверстникам из других стран. Так, результат 5% самых лучших российских учащихся по общей шкале грамотности чтения составил 608 баллов (средний международный результат пяти процентов самых лучших учащихся всех участвующих стран ОЭСР - 652 балла). Результаты той же группы учащихся стран, лидирующих в исследовании, превышают 680-690 баллов.
Причины недостаточно высоких результатов российских школьников, выявленные в процессе изучения "грамотности чтения", требуют тщательного изучения и анализа, для их осмысления необходимо привлечение данных массовых обследований знаний, проведение дополнительных исследований по различным аспектам полученных результатов. Здесь ограничимся лишь несколькими важными, на наш взгляд, соображениями.
Исследование такой направленности, характера и широты проведено в нашей стране впервые. При этом школьники 15-летнего возраста были мало знакомы с заданиями тестового характера, предлагавшими отметить верный ответ из предложенных, что требует строгости мышления, точности мысли. Само выполнение работы, включающей 50-60 вопросов, за 2 часа требовало немалого напряжения и, учитывая перегруженность наших школьников учебными занятиями, было для них мало мотивировано.
Новыми для российских школьников были тексты делового стиля: инструкции, объявления, реклама, расписание авиарейсов, анкеты для приема на работу и др. Учебники по русскому языку, давая представление о деловом стиле речи, не предлагают упражнений с текстами подобного характера. Многие из названных типов текстов, учитывая понижение социально-экономического статуса большого числа российских семей, оказались не актуальны для многих школьников, не вызывали жизненного интереса.
Часть текстов оказалось невозможно до конца адаптировать к российским условиям, хотя такая задача и ставилась перед участниками исследования. Различия в социальной жизни стран-участниц и нашей страны оказались достаточно велики, чтобы их можно было учесть при адаптации текстов. Некоторые реалии жизни, такие, как интервью при приеме на работу, только еще входят в социальный быт россиян.
Большое значение в образовании российских школьников придается осмыслению художественно-литературных текстов как на уроках литературы, так и на уроках русского языка, а также на уроках истории и обществознания. Однако процент текстов такого характера, включенных в международное исследование, оказался весьма мал. Более того, их художественная специфика вопросами и заданиями почти не выделялась. Неслучайно в классификации текстов (см. Таблицу 1) художественно-литературные тексты включены в такие их типы, как повествование и описание.
На результатах исследования сказался также недостаточный диалогический характер гуманитарного образования в российской школе. Наших учащихся затрудняли задания, требовавшие соотнести различные точки зрения на явления и события, высказать собственную версию их смысла. Старые традиции единой и всегда верной "точки зрения на мир" все еще присущи преподаванию гуманитарных дисциплин. Только в последние годы появились учебники по литературе и обществоведению, сталкивающие различные позиции и взгляды на общественные явления, художественные ценности (Учебники-практикумы по литературе под. ред. Г.И. Беленького (9 кл.) и Ю.И.Лыссого (10, 11 кл.), Учебные хрестоматии по обществоведению (под ред. Л.Н.Боголюбова)).
Подводя итоги, скажем, что слабые результаты, выявленные в процессе исследования "грамотности чтения", оказались вызваны недостаточно формируемыми у наших школьников такими качествами, как самостоятельность мысли и инициатива в выборе собственной жизненной позиции.
Математическая грамотность
Возрастание роли математики в современной жизни привело к тому, что для адаптации в современном обществе и активному участию в нем необходимо быть математически грамотным человеком.
В проведенном исследовании было принято следующее определение понятия: "математическая грамотность" - способность человека определять и понимать роль математики в мире, в котором он живет, высказывать хорошо обоснованные математические суждения и использовать математику так, чтобы удовлетворять в настоящем и будущем потребности, присущие созидательному, заинтересованному и мыслящему гражданину.
Содержание этого понятия уточняется следующим образом.
Под математической грамотностью понимается способность учащихся:
Использование термина "грамотность" позволяет показать, что изучение состояния математических знаний и умений, обычно определяемых в школьной программе, не является первоочередной задачей данного исследования. Основное внимание уделяется проверке способностей учащихся использовать математические знания в разнообразных ситуациях, требующих для своего решения различных подходов, размышлений и интуиции. Очевидно, что для решения поставленных проблем учащимся необходимо иметь значительный объем математических знаний и умений, которые обычно формируются в школе. В исследовании не ставится цель проверить каждое из выделенных предметных знаний и умений в отдельности. В большинстве ситуаций требуется использовать знания и умения из разных тем и разделов не только курса математики, но и других школьных предметов, например, физики, биологии, химии.
По мнению разработчиков исследования, одним из аспектов, характеризующих математическую грамотность, является "математическая компетентность" - наиболее общие математические способности и умения, включающие математическое мышление, письменную и устную математическую аргументацию, постановку и решение проблемы, математическое моделирование, использование математического языка, использование современных технических средств (например, информатики). В исследовании используются такие проверочные задания, которые требуют для своего решения комплексного использования различных способностей и умений, определяющих математическую компетентность.
Выделены три иерархических уровня математической компетентности, которые являются опорой при отборе содержания проверки. Первый уровень включает воспроизведение математических фактов, методов и выполнение вычислений; второй уровень - установление связей и интеграцию материала из разных математических тем, необходимых для решения поставленной задачи; третий уровень (самый высокий) - математические размышления, требующие обобщения и интуиции.
Для проверки достижения первого уровня компетентности в основном предлагаются традиционные учебные задачи (см. приложение 3, задание "Треугольники"). Второй уровень проверяется с помощью решения несложных жизненных задач (см. задание "Гоночная машина"). Для проверки достижения третьего уровня разрабатываются более сложные задания, в которых прежде всего необходимо самостоятельно "математизировать" предложенную жизненную ситуацию - выделить в ситуации проблему, которая решается средствами математики, и разработать соответствующую ей математическую модель. Затем размышлять над решением поставленной математической задачи, решить ее, используя математические рассуждения и обобщения, и интерпретировать решение с учетом особенностей рассмотренной в задании ситуации (см. Приложение 3, задание "Яблони", вопрос 3).
Согласно цели данного исследования учащимся в основном предлагаются не учебные, а практические ситуации, характерные для повседневной жизни (жилье, игры, школьные проблемы, общественные события и явления и др.). Используемые математические задания значительно различаются по трудности, а именно, по объему и сложности требуемых преобразований и вычислений, по необходимости интеграции материала из различных областей знания, использованию той или иной формы представления предложенных в условии данных и их интерпретации, сложности в понимании ситуации, описанной в задании, и определению методов решения поставленной проблемы.
Следует отметить, что в основные цели проведенного исследования входила также проверка такого важнейшего умения для современного грамотного человека, как умения учиться, самостоятельно приобретать знания. Для достижения этой цели были разработаны специальные, так называемые "структурированные задания", включающие несколько вопросов относительно одной и той же ситуации, которые располагались по возрастанию сложности. Они призваны выполнять двоякую роль, позволяя дифференцировать учащихся по уровню компетентности и зафиксировать умение учащихся самостоятельно приобретать знания. Для этого вопросы были составлены таким образом, чтобы в процессе их последовательного выполнения учащиеся получали некоторые "подсказки", необходимые для решения расположенных на последнем месте наиболее сложных вопросов, которые, как правило, требовали некоторого обобщения или генерализации (см. Приложение 3, задания "Гоночная машина", "Яблони"). В качестве основной количественной характеристики математической грамотности учащихся конкретной страны используется средний балл, подсчитанный по результатам выполнения математической части работы всеми учащимися этой страны. Для определения положения страны эти результаты сравниваются со средним баллом, подсчитанным по результатам учащихся всех стран.
По сравнению со средними результатами стран-членов ОЭСР по состоянию математической грамотности страны распределились на три группы (см. Таблицу 3):
Отметим, что Россия относится к третьей группе стран (общий результат - 478 баллов, 21-25 место).
Попарное сравнение результатов России с результатами других стран позволило определить ее позицию по отношению к каждой стране, участвовавшей в исследовании:
- значимо выше российских результаты 17 стран (Япония, Корея, Новая Зеландия, Финляндия, Австралия, Канада, Швейцария, Великобритания, Бельгия, Франция, Австрия, Дания, Исландия, Лихтенштейн, Швеция, Ирландия, Норвегия);
- результаты существенно не отличаются от российских у 7 стран (Чешская Республика, США, Германия, Венгрия, Испания, Польша, Латвия), среди них две страны, в которых математическая подготовка учащихся традиционно считается высокой - Чешская Республика, Венгрия;
- результаты существенно ниже российских в 6 странах (Италия, Португалия, Греция, Люксембург, Мексика, Бразилия).
Интерпретируя результаты проведенного исследования, необходимо иметь в виду, что изучение математической грамотности не являлось его основной целью. Поэтому учащимся было предложено только 16 групп математических заданий, которые включали всего 32 вопроса. Очевидно, что результаты их выполнения не позволяют достаточно полно оценить математическую подготовку выпускников основной школы России. Тем не менее, несоответствие этой подготовки некоторым международным требованиям выявилось достаточно явно.
Анализ содержания заданий еще до проведения исследования позволил сделать предположение о том, что итоги их выполнения будет невысоки по ряду причин. Одной из основных причин является то, что содержание большинства заданий не связано или слабо связано с основным материалом, изучаемым в курсе математики 9-летней школы.
Так, например, в зарубежной школе уделяется значительное внимание элементам стереометрии. Поэтому неудивительно, что 6 групп заданий из 16 проверяют усвоение именно этого материала, который российскими школьниками изучается в старшей школе. В тех случаях, когда для решения предложенных заданий было достаточно общих представлений о пространственных фигурах и здравого смысла, 50-70% наших учащихся давали верные ответы. Если для решения задания требовались знания особенностей пространственных фигур и более развитые пространственные представления, результаты резко снижались.
Нашим учащимся явно мешает отсутствие опыта работы с тестовыми заданиями, в которых достаточно указать только верный ответ и не требуется приводить решение. В некоторых случаях ответ несложно было получить с помощью способа "проб и ошибок", который в нашей школе почти не используется, но иногда оказывается весьма эффективным в тех случаях, когда учащиеся не знают соответствующего математического способа решения поставленной проблемы.
В некоторых заданиях от учащихся требовалось объяснить полученный ответ. При этом не предъявлялось очень высоких требований к математической строгости этих объяснений. Однако наши учащиеся, приученные достаточно строго обосновывать свои решения, предпочитали пропускать такие вопросы, если не могли дать строгого объяснения.
Формулировка некоторых заданий значительно отличается от большинства учебных заданий, типичных для большинства наших действующих учебников. А именно в них достаточно многословно описывается некоторая близкая к реальной ситуация, которая может включать факты и данные, не являющиеся необходимыми для решения проблемы. Не удивительно, что значительная часть учащихся затруднилась составить математическую модель подобных ситуаций.
В проведенном исследовании несложно выделить знания и умения, которые на международном уровне считаются необходимыми для математически грамотного современного человека. К ним относятся: пространственные представления; пространственное воображение; свойства пространственных фигур; умение читать и интерпретировать количественную информацию, представленную в различной форме (таблиц, диаграмм, графиков реальных зависимостей), характерную для средств массовой информации; знаковые и числовые последовательности; определение периметра и площадей нестандартных фигур; действия с процентами; использование масштаба; использование статистических показателей для характеристики различных реальных явлений и процессов; умение выполнять действия с различными единицами измерения (длины, массы, времени, скорости) и др. Необходимо также указать такое важнейшее общеучебное умение, как умение внимательно прочитать некоторый связный текст, выделить в приведенной в нем информации только те факты и данные, которые необходимы для получения ответа на поставленный вопрос. К сожалению, формированию этих практически ориентированных знаний и умений в нашей школе не уделяется должного внимания. Эти же знания и умения проверялись у учащихся 11 класса в рамках другого международного исследования (TIMSS) в 1995 году. Результаты наших выпускников старшей школы были подобны результатам, показанным 15-летними учащимися в рамках исследования PISA в 2000 году. Вывод, который был сделан в 1995 году, актуален и сейчас. Очевидно, что давно поставленная перед нашей школой цель научить учащихся свободному использованию математики в повседневной жизни не достигается на уровне современных международных требований. Одна из основных причин - отсутствие реализации этой цели в действующих учебниках основной и средней школы.
Естественнонаучная грамотность
Под естественнонаучной грамотностью в исследовании понималась способность учащихся использовать естественнонаучные знания для отбора в реальных жизненных ситуациях тех проблем, которые могут быть исследованы и решены с помощью научных методов, для получения выводов, основанных на наблюдениях и экспериментах, необходимых для понимания окружающего мира и тех изменений, которые вносит в него деятельность человека, а также для принятия соответствующих решений.
Для определения уровня сформированности естественнонаучной грамотности оценивались следующие умения учащихся:
- использовать естественнонаучные знания в жизненных ситуациях;
Задания по естествознанию, так же как по чтению и математике, включали группу вопросов, связанную с текстом, в котором описывалась некоторая ситуация из истории естествознания или из повседневной жизни. Каждый вопрос проверял овладение отдельным знанием или умением, а группа вопросов - некоторой их совокупностью. Всего в исследовании использовалось 14 групп заданий по естествознанию, включающих всего 35 заданий-вопросов, треть из которых составили задания со свободным ответом, а пятую часть - комплексные задания.
Предлагаемые учащимся ситуации в заданиях связаны с проблемами, которые возникают в быту каждого человека (например, выбрать продукты при соблюдении диеты), а также в жизни человека как члена общества (например, определить наиболее целесообразное место строительства электростанции относительно города) или как гражданина мира (например, оценить последствия глобального потепления). Ситуации группируются вокруг следующих выделенных в исследовании областей науки: "Естествознание, жизнь и здоровье", "Здоровье, болезни и питание", "Сохранение и устойчивое использование видов", "Взаимозависимость физических/биологических систем", "Наука о Земле и окружающей среде", "Загрязнения", "Образование и разрушение почвы", "Погода и климат", "Естествознание и технология", "Биотехнологии", "Использование материалов и захоронение отходов", "Использование энергии", "Транспорт".
Естественнонаучная грамотность так же, как и математическая, оценивалась по 1000-балльной шкале, имевшей одинаковые характеристики (среднее значение - 500, стандартное отклонение - 100).
Задания по естествознанию имели различную трудность, так как они включали понятия различной сложности, различную форму представления данных. При выполнении их требовалось осуществить интеллектуальную деятельность разных видов.
Учащиеся, продемонстрировавшие высокий уровень естественнонаучной грамотности, как правило, могли выполнить задания, в которых требовалось объяснить или спрогнозировать явления на основе их моделирования, проанализировать результаты ранее проведенных исследований, сравнить данные, привести научную аргументацию для подтверждения своей позиции или оценки различных точек зрения. К высокому уровню естественнонаучной грамотности может быть отнесено выполнение задания 1 (с открытым ответом) из группы заданий "Дневник Семмельвайса" (см. Приложение 4). Учащимся приводились отрывки из дневника Игнаца Семмельвайса, известного врача, жившего в 18 веке и описавшего последствия родильной горячки, от которой умерло большое число женщин после родов. В дневнике приводились данные о различной смертности женщин в двух палатах больницы. Современники Семмельвайса считали, что причинами смерти могут быть "изменения в воздухе или какое-то внеземное влияние, или движение самой земной поверхности, землетрясение". Задание формулировалось следующим образом: "Представьте себя на месте Семмельвайса. Объясните (основываясь на собранных Семмельвайсом данных), почему родильная горячка вряд ли вызывается землетрясением". В ответе нужно было проанализировать диаграмму, показывающую смертность женщин в двух палатах на 100 рожениц, выявить значительные различия этих данных и сделать вывод, о том, что если бы причиной было землетрясение, то смертность женщин была бы одинаковой в обеих палатах. Трудность данного задания по международной шкале - 666 баллов. Данное задание правильно выполнило только 14% российских учащихся.
Учащиеся, продемонстрировавшие средний уровень сформированности естественнонаучной грамотности, могли использовать полученные в школе знания для объяснения или прогнозирования естественных явлений, выявить вопросы, на которые могла бы ответить наука, показать особенности научного исследования, представить информацию, подтверждающую сформулированные заданием выводы. Примером может служить задание с выбором ответа (вопрос 4 из группы заданий "Дневник Семмельвайса"). В этом задании от учащихся требовалось выйти за рамки описанного факта и объяснить некоторое явление на основе имеющихся у них биологических знаний. Правильно это задание выполнили 41% российских учащихся. Трудность данного задания по международной шкале - 508 баллов. Обращает на себя внимание, что 31% наших пятнадцатилетних подростков выбрали неправильный, но правдоподобный ответ.
К заданиям средней трудности можно также отнести вопрос 4 из группы заданий "Озон", в котором учащиеся после прочтения текста о том, какую опасность может представлять для человечества уменьшение озонового слоя, должны были определить, на какие из предложенных вопросов можно ответить, проведя научное исследование. Для правильного ответа учащимся необходимо было отличить вопрос, на который могла бы ответить наука, от вопроса, решение которого требовало политических решений. Трудность этого задания составила 529 баллов по международной шкале. 45% российских учащихся правильно выполнили данное задание.
Нижнему уровню шкалы естественнонаучной грамотности соответствовали задания, проверявшие умения актуализировать элементарные знания, факты, приводить примеры и использовать основные естественнонаучные понятия для подтверждения правильности уже сформулированных выводов. Примером задания, проверявшего данный уровень естественнонаучной грамотности, является вопрос 3 из группы "Дневники Семмельвайса". Его трудность по международной шкале 467 баллов. Данное задание, в котором нужно было написать ответ самостоятельно, правильно выполнили 67% российских учащихся.
Обобщенный результат выполнения учащимися нашей страны заданий, оценивающих естественнонаучную грамотность, равен 460 баллам, что соответствовало 26-29 месту по рейтингу на международной шкале.
По сравнению со средними результатами стран-членов ОЭСР по уровню сформированности естественнонаучной грамотности страны делятся на три группы (см. Таблицу 3):
- страны, результаты которых статистически значимо выше средних результатов для стран ОЭСР (Корея, Япония, Финляндия, Великобритания, Канада, Новая Зеландия, Австралия, Австрия, Ирландия, Швеция, Чешская Республика, 11 стран);
- страны, результаты которых сравнимы со средними для стран ОЭСР (Франция, Норвегия, США, Венгрия, Исландия, Бельгия, Швейцария, 7 стран);
- страны, результаты которых статистически значимо ниже средних результатов для стран ОЭСР (Испания, Германия, Польша, Дания, Италия, Лихтенштейн, Греция, Российская Федерация*, Латвия*, Португалия, Люксембург, Мексика, Бразилия*, 13 стран).
По сравнению с результатами России страны можно разделить на три группы:
- страны, результаты которых статистически значимо выше российских (Корея, Япония, Финляндия, Великобритания, Канада, Новая Зеландия, Австралия, Австрия, Ирландия, Швеция, Чешская Республика, Франция, Норвегия, США, Венгрия, Исландия, Бельгия, Швейцария, Испания, Германия, Польша, Дания, всего 22 страны);
- страны, результаты которых сравнимы с российскими (Италия, Лихтенштейн, Латвия, Португалия, 4 страны);
- страны, результаты которых ниже российских (Люксембург, Мексика и Бразилия, 3 страны).
При интерпретации результатов естественнонаучной грамотности в исследовании PISA следует учитывать два важных момента. Во-первых, традиции отечественного школьного естественнонаучного образования в значительной степени направлены на формирование основ наук (физики, химии, биологии и физической географии). А в данном исследовании оценивались не предметные знания и умения в школьном контексте, а то, как основные естественнонаучные понятия и методы могут быть использованы в личностно и социально значимом контексте. Необходимо отметить, что этой стороне обучения в российской школе уделяется недостаточное внимание.
Во-вторых, подобные результаты были получены и в другом международном исследовании (TIMSS-1995). Оценка уровня естественнонаучной грамотности выпускников средней школы России, т.е. их умений применять полученные знания в контексте повседневной жизни, показала, что этот уровень значительно ниже средних международных результатов.
Результаты исследования PISA еще раз подтвердили, что российские школьники слабо ориентируются в актуальных проблемах естествознания, таких, как экологические проблемы, проблемы здорового образа жизни, влияние науки и техники на развитие общества и др. Их рассмотрению не уделяется должного внимания в школьных курсах. Эти важные для современного человека проблемы, несмотря на их многогранность, изучаются разрозненно в естественнонаучных и обществоведческих предметах, и до сих пор не делается значительных усилий для их интегрированного рассмотрения и осмысления.
Перегруженностью естественнонаучных курсов можно объяснить неоправданно низкое внимание, которое уделяется развитию интеллектуальных умений (анализ, обобщение, оценка и др.). Именно в заданиях, требующих проанализировать или сравнить результаты проведенных естественнонаучных исследований, обосновать свою точку зрения, используя научную аргументацию, наши учащиеся показали более низкие результаты.
Результаты исследования еще раз подтвердили, что российские учащиеся имеют низкий уровень сформированности общеучебных умений, основным из которых является умение работать с информацией, представленной в текстах, таблицах, диаграммах или рисунках.
Необходимо также обратить внимание на недостаточное развитие у российских пятнадцатилетних подростков коммуникативных умений. Показательным является тот факт, что до трети наших учащихся пропускали те задания, в которых требовалось дать ответ в свободной форме.
Следует указать также на недостаточную способность наших школьников выполнять задания, используя повседневную лексику. Одной из основных целей естественнонаучного образования является научить учащихся использовать научные понятия и термины для объяснения окружающих явлений. Эта цель является важной для российской школы. Также важно уметь объяснять суть явлений, используя понятный для многих естественный язык. Еще исследование TIMSS-95 показало, что наши учащиеся предпочитают пропустить задание, если не могут объяснить естественнонаучное явление с помощью научной терминологии, и практически не пытаются пояснить его суть, используя повседневную лексику. В исследовании PISA эти результаты повторились.
Можно говорить о непривычной форме теста, о том, что в тест были включены задания по чтению, математике и естествознанию (а не по физике или биологии) в непривычном контексте. Но такая форма теста была непривычной и для учащихся других стран, например, Венгрии или Чехии, которые, однако, в большей степени оказались приспособленными к новым условиям международного тестирования.
Результаты исследования PISA выдвигают много вопросов перед школьным естественнонаучным образованием, в котором пока слабо реализуются новые приоритеты образования (например, применение основных естественнонаучных понятий и методов в различных ситуациях повседневной жизни; работа с информацией, заданной в различном виде; выдвижение гипотез и проведение исследований, их подтверждающих или опровергающих).
Взаимосвязь результатов российских учащихся и
особенностей
образовательных учреждений
Если рассчитать средний результат учащихся каждого образовательного учреждения нашей страны, участвовавшего в исследовании, и расположить образовательные учреждения в порядке возрастания их результатов, то можно получить распределение, представленное на рис. 1. Анализ данного распределения показывает большой разброс результатов по стране. Наряду с образовательными учреждениями, имеющими высокие результаты по чтению (превышающие средний международный уровень и соответствующие самому высокому уровню сформированности грамотности чтения (уровни 4 и 5)), имеются учреждения, дающие средний уровень ниже первого (ниже 335 баллов). Учащиеся этих образовательных учреждений не владеют на достаточном уровне основными познавательными умениями, необходимыми для получения образования. К таким учреждениям, как правило, относятся основные (9-летние) школы, расположенные в сельской местности, и образовательные учреждения начального профессионального образования.
В основном на средний уровень результатов по чтению оказывают влияние следующие факторы: тип и вид образовательного учреждения, его расположение, социально-экономический статус семей учащихся данного образовательного учреждения.
В таблице 4 приводятся результаты образовательных учреждений в зависимости от их типа. Анализ данных, представленных в таблице, показывает, что самые низкие результаты имеют учащиеся образовательных учреждений начального профессионального образования. Диаграмма, представленная на рис. 2, наглядно иллюстрирует эти различия. Необходимо также учитывать, что учреждения начального профессионального образования составили 16,3% выборки российских образовательных учреждений, основные школы - 6,5%.
Рис. 1. Распределение образовательных учреждений, участвовавших в исследовании PISA, с учетом их результатов по чтению
Таблица 4. Результаты образовательных учреждений в зависимости
от их типа
(в баллах по международной шкале)
|
Все образовательные учреждения |
Учреждения общего образования |
Учреждения среднего профессионального образования |
Учреждения начального профессионального образования | |
|
Грамотность чтения |
462 |
473 |
472 |
403 |
|
Математическая грамотность |
478 |
488 |
487 |
427 |
|
Естественнонаучная грамотность |
460 |
472 |
466 |
403 |
Рис. 2. Результаты образовательных учреждений в зависимости от их типа.
В таблице 5 представлены результаты образовательных учреждений разного типа по различным умениям (шкалам), оцениваемым по чтению: нахождению информации, интерпретации текста, рефлексии и оценки текста.
Таблица 5. Результаты образовательных учреждений по различным умениям по чтению
|
Все образовательные учреждения |
Учреждения общего образования |
Учреждения среднего профессионального образования |
Учреждения начального профессионального образования | |
|
Нахождение информации |
451 |
462 |
460 |
386 |
|
Интерпретация текста |
468 |
478 |
478 |
411 |
|
Рефлексия и оценка текста |
455 |
466 |
463 |
394 |
Рис.3. Результаты образовательных учреждений по чтению.
Анализ результатов по чтению с учетом различных умений показывает то же самое, что и таблица 4. По всем выделенным умениям учащиеся учреждений начального профессионального образования сильно отстают от своих сверстников из других образовательных учреждений (см. рис. 3). Полученные данные необходимо учитывать при модернизации системы профессионального образования, важной задачей которой является повышение общеобразовательной подготовки учащихся.
Разброс результатов образовательных учреждений внутри стран, как показало исследование, во многом определяется особенностями образовательных систем этих стран.
Имеются страны с большим разбросом результатов. К ним относятся Австрия, Бельгия, Германия, Венгрия и Польша. В основном это страны, которые постоянно дифференцируют своих учащихся по уровню образовательных достижений по мере перехода с одной ступени обучения на другую. Однако имеются страны (Норвегия, Швеция, Финляндия, Новая Зеландия, Корея), в которых различия между школами незначительны, а разброс результатов по стране связан с различиями учащихся, обучающихся в образовательных учреждениях. Эти страны проводят политику обеспечения равных возможностей для всех детей страны в получении полноценного образования.
Общеучебные компетенции
Для успешного продолжения образования после завершения обязательной ступени школы выпускники должны обладать не только определенной системой знаний и умений, но и иметь определенный интерес к получению дальнейшего образования, а также уметь организовать собственное обучение.
Анализ ответов учащихся на вопросы, определяющие их отношение к школе, интерес к той или иной деятельности, показал следующее.
В 20 из 28 стран ОЭСР более 25% учащихся считают школу тем местом, куда им не хочется идти. В Бельгии таких учащихся больше всего (42%), в Канаде - 37%, Франции - 37%, Венгрии - 37%, США - 35%, в России - 17%. Связь между отношением учащихся к школе и их результатами тестирования носит очень сложный характер. В некоторых странах учащиеся демонстрируют высокие результаты, несмотря на достаточно негативное отношение к школе.
Отношение к чтению является одним из важных результатов обучения. Исследование показало, что отношение к чтению значительно отличается у учащихся в разных странах. Около половины всех 15-летних, участвовавших в исследовании во всех странах, имели положительное отношение к чтению. Однако в Бельгии и Корее, достижения учащихся в которых достаточно велики, таких учащихся было меньше 30%, а в Мексике и Португалии, результаты которых ниже средних международных, положительное отношение к чтению выразило более 2/3 учащихся. В России таких учащихся менее 50%. Только 42% наших учащихся согласились с высказыванием о том, что чтение - одно из их любимых занятий. Тридцати одному проценту наших пятнадцатилетних подростков, по их ответам, трудно дочитать книгу до конца. 57% учащихся отметили, что они читают только для того, чтобы получить нужную им информацию (таких ответов в среднем по странам ОЭСР было 44%). 13% наших пятнадцатилетних указали, что они никогда не читают художественную литературу по собственному желанию.
В исследовании была выявлена существенная связь между отношением к чтению и результатами выполнения международного теста. Учащиеся каждой страны с положительным отношением к чтению имели более высокие результаты, чем учащиеся, например, согласившиеся с тем, что чтение для них пустая трата времени. Никогда раньше российские школьники не признавались, что чтение для них пустая трата времени. Опрос показал, что согласились с этим высказыванием 16% наших пятнадцатилетних учащихся, в среднем по странам ОЭСР - 21%.
Наиболее значительное влияние на результаты тестирования оказало овладение общеучебными умениями организовывать собственное познание, управлять познавательным процессом. Учащихся спрашивали, в какой степени они
Анализ результатов показал, что, если в каждой стране выделить две равные группы учащихся (например, по 25% от всех участвовавших в тестировании), имевших самые высокие и самые низкие показатели организации учебного познания, и проанализировать влияние данного показателя на результаты тестирования, то можно увидеть, что учащиеся, имевшие наивысшее значение показателя, имели статистически значимо более высокие результаты. В России эти две группы учащихся имели результаты, в среднем отличающиеся различными уровнями сформированности умений работать с текстами. Учащиеся с высоким показателем организации собственного учения имели в среднем третий уровень грамотности чтения, а учащиеся с низким показателем - в среднем второй уровень.
В исследовании рассматривались различные стратегии, используемые учащимися при овладении учебным материалом: запоминание учебного материала и активная работа с изучаемым материалом.
Учащиеся, которые в основном использовали методы, ориентированные на запоминание учебного материала, имели различные результаты тестирования, выше или ниже средних по стране. По сравнению с ними учащиеся, у которых преобладала активная работа при изучении нового материала, всегда во всех странах имели более высокие результаты.
Например, для Кореи показатель использования активных методов оказался выше, чем показатель использования методов, ориентированных на простое запоминание. И результаты выполнения теста для группы учащихся, использующих активные методы, были статистически значимо выше, чем для другой группы учащихся, в основном запоминающих все, что надо освоить. Для России показатель использования методов, ориентированных на запоминание, выше, чем показатель использования активных методов. При этом учащиеся, использующие активные методы, показали более высокие результаты.
При анализе влияния различных стилей обучения (соревновательного или сотрудничества) на результаты тестирования было выявлено следующее. Учащиеся, у которых проявился соревновательный стиль обучения, показали более высокие результаты, чем те, у которых он не выявился. Совершенно аналогично у учащихся, которые отдают предпочтение обучению в сотрудничестве, были выявлены более высокие результаты, чем у тех, у которых этот стиль обучения не был обнаружен. Полученные данные говорят о том, что оба стиля обучения могут дополнять друг друга при определенных условиях, а не являются альтернативными по отношению друг к другу.
Полученные результаты требуют дополнительного анализа, так как на основе первичного анализа данных еще нельзя сделать вывод о том, что те или иные стратегии являются наиболее эффективными. Возможно, что учащиеся, использующие эти стратегии, показали более высокие результаты по другим причинам. Однако сам результат исследования, заключающийся в том, что существуют определенные связи между используемыми стратегиями обучения и результатами тестирования, является очень важным.
Различия между мальчиками и девочками
Проблема обеспечения равенства возможностей в получении полноценного образования становится ключевой в настоящее время. Исторически во многих странах большее внимание всегда уделялось проблеме "ущемления" прав девочек в получении образования. Исследование PISA показало, что многие страны успешно справляются с этой проблемой. При этом выявились проблемы в обучении мальчиков, особенно в области чтения.
Исследование показало различие в результатах тестирования между мальчиками и девочками. Различия также обнаружены в их отношениях и интересах, а также в используемых стратегиях обучения.
Во всех странах, включая и Россию, девочки в среднем показали более высокие результаты при работе с текстами, чем мальчики. Различие в результатах у российских девочек и мальчиков составляет 38 баллов (девочки - 481 балл, мальчики - 443 баллов). По другим странам эти различия находятся в пределах от 14 баллов в Корее до 52 баллов в Латвии. Существенные различия в результатах у мальчиков и девочек между странами объясняются тем, что в них по-разному решается вопрос о создании такой образовательной среды, в которой успешно могли бы получать полноценное образование и мальчики, и девочки.
По уровню сформированности математической и естественнонаучной грамотности различия между девочками и мальчиками значительно ниже, чем по чтению. По математике почти в половине стран результаты мальчиков выше. В России результаты мальчиков ниже, но всего лишь на 2 балла, что позволяет говорить о равных результатах мальчиков и девочек по математике, так как эти различия статистически незначимы. Подобные данные возникают постоянно на протяжении 10 лет во всех международных сравнительных исследованиях качества математического образования. По естествознанию в разных странах встречаются противоположные ситуации. В России получено статистически значимое различие в пользу девочек (на 14 баллов). Эти данные противоречат тем, которые были получены в других международных исследованиях качества естественнонаучного образования. Результаты мальчиков всегда статистически значимо или незначимо были выше результатов девочек. Вероятно, полученные в исследовании PISA результаты можно объяснить спецификой теста, основанного на текстах различной формы и характера. В математике число текстов и их объем были значительно меньше, чем по естествознанию.
Важным результатом исследования является выявленная тенденция, свидетельствующая о том, что во всех странах-участницах вероятность того, что мальчики будут иметь самый низкий уровень подготовки по чтению, значительно выше, чем у девочек. В России число мальчиков, имеющих первый уровень грамотности чтения или ниже, почти в два раза больше числа девочек, имеющих тот же уровень подготовки. По математике получен противоположный результат: вероятность того, что мальчики будут иметь более высокие результаты, чем девочки, выше.
Исследование также показало, что во всех странах девочки проявляют больший интерес к чтению, чем мальчики. По математике - наоборот. Мальчики проявляют больший интерес к математике, чем девочки.
Девочки лучше, чем мальчики организуют процесс учебного познания. Одновременно они чаще, чем мальчики, склонны использовать стратегии, ориентированные на запоминание учебного материала, а не на активные методы работы.
Приведенные выше данные показывают, что в организации учебного процесса нельзя не учитывать различные интересы, привычки и жизненный опыт мальчиков и девочек, так как они сильно влияют на результаты обучения.
Связь между результатами учащихся и показателями,
характеризующими их семьи
Хорошо известно, что учащиеся, социально-экономический статус семей которых выше (образование родителей, домашние ресурсы и др.), как правило, имеют более высокие результаты. В исследовании PISA изучалось влияние этих факторов на достижения учащихся.
Самое значительное влияние на результаты тестирования оказывает фактор, связанный с профессией родителей. Если учащихся распределить по международной шкале профессий их родителей и взять две крайние группы по 25%, имеющие самые высокие и самые низкие значения этого показателя, то результаты учащихся этих групп по грамотности чтения будут сильно отличаться. Наибольшее отличие в 114 баллов наблюдалось у учащихся Швейцарии и Германии. Для России это различие составляет 73 балла.
В исследовании было подтверждено влияние образования родителей на результаты тестирования. Однако значительное влияние (негативное) было обнаружено только для тех учащихся, у которых матери не получили среднего образования. Выявлено также, что наличие высшего образования у матери оказывает меньшее влияние на результаты тестирования, чем наличие среднего.
Другим важным определяющим фактором является степень общения родителей с детьми и характер их бесед. Выявлено влияние частоты общения с детьми на результаты в грамотности чтения. Наибольшее влияние оказывают беседы о прочитанных книгах, чем на другие темы, например, о делах в школе.
Подтверждено, что учащиеся из более обеспеченных семей имеют в среднем лучшие результаты. Значительное влияние оказывает сформированная дома культурная среда (наличие дома классической литературы, музыкальных инструментов и произведений искусств).
Следующим по степени влияния на результаты оказался показатель состава семьи. Учащиеся из неполных семей в среднем имеют более низкие результаты по грамотности чтения.
Связь между результатами учащихся и показателями, характеризующими образовательные учреждения
В исследовании удалось выделить особенности образовательных учреждений, которые значительно влияют на результаты обучения. К ним относятся: а) степень использования учащимися образовательных ресурсов (библиотеки, компьютеров, Интернета и др.); б) доля учителей, имеющих высокий профессиональный уровень; в) степень участия образовательного учреждения в принятии решений; г) уровень дисциплины в образовательном учреждении.
Социально-экономический показатель школы (обобщенная характеристика всех семей учащихся, обучающихся в школе) является еще более сильным фактором, чем социально-экономический показатель отдельных учащихся. В исследовании показано, что, например, если два ученика, имеющие одинаковые характеристики семей, будут обучаться в школах с различными социально-экономическими показателями школы, то различия в их учебных результатах будут больше, чем, если бы они учились в одной и той же школе.
Выявлено также, что влияние социально-экономических факторов на результаты грамотности чтения значительнее в странах с большей дифференциацией в образовании. В странах с сильной степенью дифференциации учащихся на основе социально-экономических показателей более продвинутые школы имеют более квалифицированных учителей, лучшую материальную базу и учебные ресурсы.
Однако ряд стран, таких как Канада, Финляндия, Исландия, Япония, Корея и Швеция, продемонстрировали в данном исследовании противоположную тенденцию: возможность обеспечения высокого качества образования в стране при одновременном обеспечении равенства возможностей для детей разных социальных групп. Эти страны характеризуются высоким уровнем достижений в грамотности чтения (выше среднего международного) и низким уровнем влияния социально-экономических факторов на эти результаты (ниже среднего международного).
В исследовании PISA, как и во всех других международных сравнительных исследованиях, делается вывод о том, что нет одного единственного фактора, объясняющего те или иные результаты различных стран. Взаимодействие факторов носит сложный характер и требует дополнительного многофакторного анализа с учетом показателей, характеризующих различные уровни и объекты системы образования.
Заключение
С начала 90-х годов Министерство образования РФ совместно с Российской академией образования принимает участие в сравнительных международных исследованиях качества образования (1991 г. - IAEP-II, 1995 г. - TIMSS, 1999 г. - TIMSS-R). Результаты этих исследований показали, что уровень подготовки школьников по естественно-математическим предметам устойчиво превышает средние международные показатели. Российские школьники не имеют существенных различий в общеобразовательной подготовке со своими сверстниками в большинстве развитых стран мира. Исключение составляет лидирующая в мире группа стран Юго-Восточной Азии и Тихоокеанского региона (Япония, Южная Корея, Сингапур).
Вместе с тем уже в этих исследованиях выявлено, что при наличии достаточно высоких предметных знаний и умений, российские школьники испытывают затруднения в применении этих знаний в ситуациях, близких к повседневной жизни, а также в работе с информацией, представленной в различной форме, характерной для средств массовой информации.
Значительные изменения приоритетов в школьном образовании в мире за последние годы (переориентация на компетентностный подход, непрерывное самообразование, овладение новыми информационными технологиями, умение сотрудничать и работать в группах и др.) нашли отражение в новой программе международных исследований (PISA-2000). Одной из основных целей исследования было оценить способность молодых людей 15-летнего возраста к активному участию в жизни общества. Результаты нашей молодежи в этом исследовании вызывают тревогу, свидетельствуя о том, что российская школа не обеспечивает достаточную готовность ее выпускников к жизни в постиндустриальном информационном обществе, отвечающую современным международным требованиям.
На охарактеризованные в отчете результаты тестирования российских школьников в проведенном международном исследовании PISA могли повлиять следующие основные причины, которые требуют дополнительного изучения и анализа.
1. Недостаточная практическая ориентированность содержания образования по русскому языку, математике и естественнонаучным дисциплинам, их некоторая оторванность от реалий жизни, окружающей школьника.
2. Перегруженность программ и учебников учебными материалами.
3. Недостаточное внимание к формированию общеучебных умений.
Названные недостатки - следствие крайностей в реализации академического и фундаментального подходов в программах и учебниках среднего образования в России. На наш взгляд, следует, не отказываясь от этих лучших традиций нашей школы, усилить личностную и практическую ориентированность содержания и процесса образования, повысив развивающий его характер.
Это потребует пересмотреть требования к результатам обучения как составной части стандарта образования, ввести в программы и учебники материалы практикоориентированного характера, усилить диалогический характер гуманитарного образования, знакомя школьников с различными, порой противоположными точками зрения на события истории и жизни общества, на явления искусства. Для этого необходимо будет сократить содержание образования по каждой из учебных дисциплин, оставляя учебное время для развития творческих способностей школьников.
Все сказанное еще раз подтверждает важность инициированной правительством модернизации российского образования и требует активного участия всего общества в реализации этой реформы. Если в ближайшее время не будут предприняты необходимые усилия, то велика вероятность значительного снижения конкурентоспособности российского образования.
Литература
ПРИЛОЖЕНИЕ 1
СПИСОК ОРГАНИЗАЦИЙ, ЛИЦ И РЕГИОНОВ,
ПРИНИМАВШИХ УЧАСТИЕ В ИССЛЕДОВАНИИ PISA-2000
Министерство образования РФ: Филиппов В.М., Болотов В.А., Киселев А.Ф., Шадриков В.Д., Леонтьева М.Р., Коровин В.А.
Институт общего среднего образования РАО: Дик Ю.И., Дюкова С.Е., Украинский Д.Л., Резникова В.З.
Центр оценки качества образования ИОСО РАО: Ковалева Г.С., Красновский Э.А., Краснокутская Л.П., Краснянская К.А., Баранова В.Ю., Каменщикова Е.К., Кошеленко Н.Г., Левицкая М.Л, Найденова Н.Н, Нурминская Н.В., Гущина О.В.
|
Регионы |
Региональные координаторы | |
|
1 |
Республика Башкортостан |
Батыргариева Ф.М. |
|
2 |
Республика Бурятия |
Шаманская Л.Г. |
|
3 |
Республика Кабардино-Балкария |
Канкулова Л.Х., Дадов А.А. |
|
4 |
Республика Калмыкия |
Выродова Т.Д. |
|
5 |
Республика Татарстан |
Ахунова Ф.С. |
|
6 |
Удмуртская Республика |
Леошко А.Н. |
|
7 |
Республика Чувашия |
Федотов М.Н. |
|
8 |
Алтайский край |
Лекомцев В.П. |
|
9 |
Краснодарский край |
Мостовая Т.В. |
|
10 |
Красноярский край |
Черепова Л.И. |
|
11 |
Приморский край |
Лабода Т.И. |
|
12 |
Ставропольский край |
Герасименко Е.В. |
|
13 |
Хабаровский край |
Антюхова В.А. |
|
14 |
Белгородская область |
Холод Н.Т. |
|
15 |
Брянская область |
Руденкова Н.М. |
|
16 |
Владимирская область |
Пимкина Л.И. |
|
17 |
Волгоградская область |
Жолобова М.А. |
|
18 |
Вологодская область |
Блинова А.С. |
|
19 |
Ивановская область |
Кольцова А.М. |
|
20 |
Иркутская область |
Костин А.К. |
|
21 |
Кемеровская область |
Егина Л.Г. |
|
22 |
Кировская область |
Гридина К.И. |
|
23 |
Ленинградская область |
Яковлева М.И. |
|
24 |
Липецкая область |
Пожидаева Г.В. |
|
25 |
Московская область |
Чайковский В.Г., Золотов Е.И. |
|
26 |
Мурманская область |
Карпенко Н.Н. |
|
27 |
Нижегородская область |
Зайчикова Т.Н. |
|
28 |
Новгородская область |
Серебрякова Л.А. |
|
29 |
Новосибирская область |
Рыцарева Г.В. |
|
30 |
Омская область |
Касаткина О.А. |
|
31 |
Оренбургская область |
Тимченко Л.А. |
|
32 |
Пензенская область |
Медведева О.В. |
|
33 |
Пермская область |
Скорогонова С.А. |
|
34 |
Ростовская область |
Хребтова О.Х. |
|
35 |
Самарская область |
Бельчикова Е.П. |
|
36 |
Саратовская область |
Цапенко С.В. |
|
37 |
Свердловская область |
Мамонтова М.Ю. |
|
38 |
Тверская область |
Кириллова В.Н. |
|
39 |
Томская область |
Петров Г.С. |
|
40 |
Челябинская область |
Елагин М.А. |
|
41 |
Читинская область |
Глазырин В.В. |
|
42 |
Ярославская область |
Крайнова Т.М. |
|
43 |
г. Москва |
Татур А.О. |
|
44 |
г. Санкт-Петербург |
Войтова С.А. |
|
45 |
Усть-Ордынский округ |
Ергонова Н.С. |
|
46 |
Ханты-Мансийский округ |
Матросова О.П. |
ПРИЛОЖЕНИЕ 2
Скачать примеры заданий, проверяющих грамотность чтения.
ПРИЛОЖЕНИЕ 3
Скачать примеры заданий, проверяющих математическую грамотность.
ПРИЛОЖЕНИЕ 4
Скачать примеры заданий, проверяющих естественнонаучную грамотность.