pirls timss pisa что это
Разбираемся в концепции основных международных сравнительных исследований качества школьного образования
В материале использованы данные, подготовленные под руководством Г. С. Ковалевой в Центре оценки качества образования ФГБНУ «Институт стратегии развития образования РАО».
Новый виток интереса к международным исследованиям связан с поручением президента правительству РФ обеспечить глобальную конкурентоспособность российского образования и вхождение России в число 10 ведущих стран мира по качеству общего образования.
«Топовая позиция в мировом рейтинге международных исследований — не самоцель. Прежде всего, всех волнует качество полученных знаний и конкурентоспособность российской образовательной системы. Это зафиксировано и в государственной программе «Развитие образования»».
Почему страны участвуют в международных сравнительных исследованиях?
Особенности международных сравнительных исследований
1. Наличие четких концептуальных положений. Формируются за несколько лет до начала цикла исследования. Сначала создается концептуальная рамка, а потом — создание конкретного инструментария для решения целей.
2. Очень строгие подходы к выборке и математической обработке результатов.
3. Регулярность проведения.
4. Уровневый подход в описании результатов.
5. Сбор контекстной информации (анкеты учащихся, родителей, учителей, администрации).
«Несмотря на неоспоримые отличия, в каждом цикле есть то, что объединяет все исследования — грамотность. Приоритетной целью в системе общего образования становится формирование функциональной грамотности: математической, естественно-научной, читательской и т. д.»
В каждом цикле один из компонентов является доминирующим. И на его оценивание направлено больше заданий, чем на остальные из трех компонентов. Хотя все они обязательны. В 2018 году факультативным компонентом был навык решения проблем, а в 2021 году таким компонентом будет оценка креативного мышления, свойственного 15-летним школьникам.
Так происходит и в жизни: мы анализируем информацию, учимся понимать, что нам нужно, а что нет.
«Жизнь ставит перед нами задачи, не предупреждая о том, какие навыки она будет проверять. Нужно быть готовым действовать по обстоятельствам, принимать верные решения в непростой момент».
Выборка регионов, обработка результатов
Для того чтобы сделать объективное заключение о том, нравится вам суп или нет, нужно попробовать его не чайной ложкой, и даже не столовой, а съесть хотя бы тарелку, при этом не обязательно съедать всю кастрюлю, — это аналогия к выборке регионов страны при проведении исследования. Всю страну исследовать не обязательно, одного города и даже региона мало, а вот нескольких субъектов будет вполне достаточно для сбора актуальных данных об уровне грамотности учеников по всей стране.
На обработку результатов исследования уходит год-полтора. Тест PISA, например, был проведен в июне 2018 года, но результаты будут опубликованы лишь в конце 2019-го.
Согласно данным исследования PIRLS, результаты девочек из года в год стабильно лучше, чем результаты мальчиков:
И это кажется логичным: речевое развитие мальчиков, приходящих в школу, отличается от речевого развития девочек. Кстати, исследование направлено в том числе на то, чтобы мы увидели эту разницу воочию, хотя многие и так знают о ней на интуитивном уровне, ведь не секрет, что в младшем школьном возрасте развитие девочек происходит действительно немного быстрее.
Исследуя причины разного уровня читательской грамотности, эксперты выявили, что тематика текстов из заданий может демотивировать именно мальчиков.
Регулярность проведения исследований
Международная Ассоциация по оценке образовательных достижений – IEA – проводит сравнительные исследования.
Организация экономического сотрудничества и развития – OECD – изучает, насколько качество образования соответствует требованиям современности.
Всем международным исследованиям свойственна цикличность. Засчет этого мы можем наблюдать динамику. Например, исследование TIMSS проверяет естественно-научную грамотность школьников на 4-м и 8-м годах обучения. Так легко можно проследить, какие результаты показывает одно поколение в разные годы.
Уровневый подход в описании результатов
Очень важный аспект в подсчете результатов исследований — деление на уровни. Это не сухое отметочное представление результатов, а более глубокое и более четкое понимание способностей и недостатков ученика.
Отметочный подход не позволяет разбираться в сути: что уже получается у ребенка и куда стоит двигаться дальше.
«Стандартных ситуаций становится все меньше, чаще жизнь проверяет, как мы можем мыслить в неординарных обстоятельствах. Задача международных исследований заключается в том, чтобы раскрыть способности каждого, оценив его возможности».
Сбор контекстной информации
После тестирования ребята заполняют анкеты. Все руководство школы, учителя и даже родители учеников тоже обязаны это сделать. Информацию из анкет анализируют эксперты и сопоставляют с результатами учеников. Важно иметь представление о том, в каких обстоятельствах живет и развивается школьник: семья, окружение, ситуации в школе и дома. Один из примеров – PIRLS. Читательская грамотность школьников имеет прямую зависимость от отношения к чтению в семье. Дети, чьи родители не проявляют интерес к книгам, дали низкие результаты. И наоборот: у детей, родители которых любят читать, показатели заметно выше.
PISA — тест на компетентность
Международные тесты
Международная программа по оценке качества обучения PISA (Programme for International Student Assessment) проводится раз в 3 года, начиная с 2000 г., и проходит под патронажем Организации экономического сотрудничества и развития. Цель этого масштабного тестирования — провести оценку грамотности 15-летних школьников в разных видах учебной деятельности: естественнонаучной, математической, компьютерной и читательской.
«PISA позволяет понять, какая страна будет более конкурентоспособной в будущем за счёт потенциала подрастающего поколения»
Помимо PISA существуют и другие международные мониторинговые исследования, имеющие более узкую направленность. Тестирование TIMSS (Trends in Mathematics and Science Study), например, нацелено на проверку качества математического и естественнонаучного образования учеников четвёртых и восьмых классов. Проводится оно при поддержке Международной ассоциации по оценке учебных достижений IEA. Помимо мониторинга качества знаний TIMSS призвано ещё и выявить различия в национальных системах образования разных стран.
А тестирование PIRLS (Progress in International Reading Literacy Study) Направлено на то, чтобы оценить качество чтения и понимания текста у ребят начальной школы. Так же, как и TIMSS, оно показывает различия в национальных системах образования. Исследование PIRLS проводится раз в пять лет, и проходило уже четыре раза: в 2001, 2006, 2011 и 2016 годах.
PISA и функциональная грамотность
В исследование PISA включены задания разного типа. Почти половину из них составляют вопросы, предполагающие свободные ответы. А есть вопросы с определённым, нерасширяемым списком ответов. Это значит, что ученик должен выдать самостоятельный ответ, который будет ограничен конкретными словами или числами. Почти треть всех заданий в тесте составляют вопросы с готовыми вариантами ответов.
Главное отличие программы PISA от ЕГЭ, ОГЭ и других российских тестов заключается в том, что она, в первую очередь, оценивает возможность школьников руководствоваться здравым смыслом и логикой при выполнении нестандартных задач. В этом отношении можно сказать, что PISA следует современным образовательным трендам, ведь способность учеников применять школьные знания в жизни — это важнейший аспект функциональной грамотности и навыков XXI века.
Задания PISA проверяют не заученный материал по биологии, географии, физике и обществознанию, а владение учеников компетенциями в различных контекстах этих предметов и межпредметного взаимодействия: здоровье человека, природные ресурсы, окружающая среда, экология, открытия в области науки и технологии. Существуют интерактивные задания, направленные на наблюдение за каким-то объектом, в которых нужно сделать вывод о том, как функционирует этот объект. Есть задания с аналитическим решением, в которых стоит задача предусмотреть дальнейшее развитие событий или действие каких-то предметов. В 2015 году появились в PISA и задания для коллективного выполнения — коллаборативные. В таких задачах предусмотрено совместное решение проблем. В качестве партнёров выступают виртуальные помощники, с которыми можно обсуждать, анализировать и решать заданную проблему: что-то организовать, создать, придумать, переделать или наладить. Такие задания показывают, как ученик взаимодействует с партнёром, как распределяет обязанности, и умеет ли договариваться.
Примеры заданий PISA разных лет:
Позиции России и мнения экспертов
Показатели России в международном рейтинге стран, ученики которых проходили тестирование PISA, из года в год остаются невысокими. Но надо признать, что в последнее время нашей стране всё-таки удалось их немного улучшить. Российское Министерство образования решило сделать приоритетными другие направления учебной деятельности и объявило, что коммуникация, совместная работа и умение выстраивать свою деятельность станут ключевыми навыками, развитию которых должно способствовать обучение в школе.
Ну а самыми хорошими результатами в международном рейтинге могут похвастаться страны Азии: Китай, Тайвань, Сингапур, Южная Корея, Япония. После них по уже сложившейся традиции расположились Финляндия, Лихтенштейн, Швейцария и Нидерланды.
Профессор департамента психологии факультета социальных наук НИУ ВШЭ Александр Поддьяков считает, что тесты PISA имеют и некоторые недочёты: многие интерактивные творческие задания, по его мнению, должны иметь более гибкую систему ответов. В нескольких заданиях подобного типа эксперт заметил ошибки: разработчики попросту не смогли предвидеть другие (тоже правильные!) варианты решения тестов.
А вот американский профессор педагогики Университета Аризоны Дэвид Берлинер заявляет, что результаты теста PISA связаны вовсе не с уровнем образования, а с качеством жизни в стране. В США, кстати, тестирование PISA ученики проходят не блестяще: в 2015 году страна заняла 28-е место по математике, 24-е место по чтению и 25-е — по естественным наукам. Позиции России тогда были такими: 23-е, 26-е и 33-е места по тем же дисциплинам.
Галина Ковалёва, координатор PISA в России, отмечает: низкие результаты теста в нашей стране связаны с тем, что учителя превосходно обучают предмету, однако не замечают, как знания по этому предмету усваивают отдельные ученики в классе. Кроме того, Ковалёва говорит, что российская система образования заметно отличается, например, от финской (а Финляндия почти всегда лидирует в PISA). У нас существуют целые школы для способных детей, но при этом отстающие ученики оказываются совершенно «заброшенными». В Финляндии же нет «лицейских» классов и школ «с уклоном»: одарённым школьникам разрешено заниматься самостоятельно, а для отстающих разрабатываются специальные индивидуальные программы обучения.
Читайте другие материалы по теме:
К PISA можно относиться по-разному. Конечно, в этой системе есть свои нюансы, просчёты и даже ошибки. Как и большинство систем оценки знаний, тестирование PISA несовершенно, и слепо гнаться за топовыми позициями в международном рейтинге было бы не самым умным решением для нашей страны. Но игнорировать итоги тестирования и вовсе глупо, ведь изначально исследования PISA направлены не просто на оценку достижений учеников, а на выявление слабых мест в системе школьного образования страны в целом. Результаты PISA — это результаты владения новыми важными компетенциями, ставшими не просто трендами международного образования, а ключевыми навыками современного человека, от которых зависит успех, реализация творческого потенциала и полноценное взаимодействие с обществом.
Pirls timss pisa что это
На сайте Мел была опубликована статья о системах тестирования школьников.
Ниже материалы статьи приведены полностью.
Вы наверняка что-то слышали из этих хитрых англоязычных аббревиатур, когда читали о школьниках.
Но не всегда понимали, что вообще всё это значит, какие такие исследования и что они оценивают. Рассказываем, в каких международных исследованиях участвуют российские школьники и даже учителя. И как они проводятся.
Российские школьники участвуют во многих международных исследованиях качества образования и успехов школьников по отдельным дисциплинам. Зачем это нужно? Во-первых, участие в международных исследованиях помогает достаточно объективно оценить уровень образования и сравнить его с другими странами. Во-вторых, если исследование проводится на международном уровне, это значит, что для оценки уровня образования используются самые современные мониторинговые технологии. И Россия может использовать этот опыт в проведении собственных исследований на федеральном и региональном уровнях.
Что проверяют. Как школьники умеют читать и понимать тексты.
Кто участвует. В исследовании участвуют дети, которые оканчивают начальную школу. В России это четвероклассники. Считается, что именно к этому моменту ученики настолько развивают свои навыки чтения и работы с текстом, что они становятся базой для учёбы в средней и старшей школе.
В PIRLS (Progress in International Reading Literacy Study) оценивают два вида чтения:
чтение для приобретения читательского литературного опыта;
чтение для освоения и использования информации.
Для проверки школьникам дают два текста: научно-популярный (информационный) и художественный. После чтения дети должны ответить на несколько вопросов к каждому.
Вопросы к текстам оценивают четыре навыка:
интерпретацию и обобщение информации;
анализ и оценку содержания, языковых особенностей и структуры текста.
Что проверяют. Математическую, естественнонаучную и читательскую грамотность школьников.
Кто участвует. В отличие от PIRLS, в этом исследовании участвуют 15-летние школьники.
Когда проходит. Впервые PISA провели в 2000 году, с тех пор оно проводится каждые три года. Россия принимает участие в исследовании с самого начала. А всего с 2000 по 2015 год в PISA участвовали от 32 до 74 стран мира.
Исследование PISA позволяет оценить эффективность изменений и образовательных решений за три года. По результатам теста становится понятно, в каком направлении нужно развивать российское образование, чтобы повысить конкурентоспособность выпускников российских школ.
Тест PISA адаптируется под изменения в сфере образования. Так, в 2012 году участники решали задачи «интерактивного типа», в которых нужно было виртуально обследовать какой-то предмет (например, кондиционер или MP3-плеер 
) и после этого ответить на вопросы о принципах его работы. А в 2015 году впервые проверяли финансовую грамотность школьников.
Кто участвует. Ученики 4-х и 8-х классов.
Когда проходит. Каждые четыре года. Такая схема позволяет отслеживать, какие изменения происходят в образовании при переходе из начальной в основную школу и как они влияют на качество образования.
Бонусом в странах-участницах (кстати, их в разные годы было от 25 до 50) исследуют особенности учёбы. Для этого разработаны специальные анкеты, которые заполняют не только школьники, а ещё учителя и администрация школ. Информация, которую учёные получают из этих анкет, помогает лучше понять результаты основного тестирования и объяснить, что не так с математическим или естественнонаучным образованием в стране.
Как в TIMSS показывают себя школьники из России. Результаты у российских школьников достаточно высокие. В последнем исследовании 2015 года ученики 4-х классов заняли 7-е место по математике и 4-е по естествознанию. Восьмиклассники оказались на 6-м месте по математике и на 7-м в естественных науках. Но при этом рейтинг выявил три большие проблемы российского школьного образования: большой объём домашних заданий, резкое падение успеваемости в средних классах и недовольство учителей своей работой.
Что и кого проверяют. Здесь проверяют уже не школьников, а учителей и директоров школ.
В TALIS нет никаких рейтингов преподавателей по странам. Исследователи делают выводы на основе опроса. Какие данные получают с помощью опроса? Особенности преподавания, убеждения и установки учителей, методы преподавания, удовлетворённость работой, уверенность в своих профессиональных способностях, контекст, в котором работают учителя и директора.
В отчёте о результатах TALIS-2013, который опубликован на сайте общероссийской системы оценки качества образования, так описывают российских преподавателей:
За последние пять лет состав учителей в России стал моложе, но почти 40% наших учителей старше 50 лет.
Российские учителя реже преподают больше одного предмета и редко меняют место работы.
Российские учителя работают больше своих зарубежных коллег и тратят много времени на административную работу.
Российские учителя часто «не замечают» неблагополучных детей.
Российские учителя предпочитают тестирование другим формам контроля.
Это не ЕГЭ. Что измеряют знаменитые тесты PISA и в чём пока не так сильны наши школьники
С начала двухтысячных наша страна принимает участие в международных программах исследования качества образования. Повышение места России в подобных рейтингах стало одной из целей национального проекта «Образование». В 2022 году в России пройдет очередное крупное исследование — PISA. Разбираемся, в чем особенность этого раунда и как его будут проводить.
Что такое международные исследования качества образования
С конца ХХ века — времени развития международных организаций и институций и появления мировых сопоставительных исследований — Россия участвует в измерениях качества образования. Эти исследования используют для оценки эффективности образовательных систем в разных странах и для изменения и улучшения на основе полученных результатов самого образования. Проводят их более чем в ста странах разные международные организации, в России их локализует Центр национальных и международных исследований качества образования Федерального института оценки качества образования.
В каких международных исследованиях участвует Россия
Разные программы исследований посвящены разным предметам и проверяют различные навыки у учеников разных возрастов, учителей и взрослых. TIMSS («Тренды в математике»), например, исследует уровень знаний детей 4-х и 8-х классов по математике и естественно-научным предметам, а еще одиннадцатиклассников — по углубленным курсам математики и физики. Проводят его раз в четыре года — следующий этап будет в 2023-м.
А в 2022 году в России пройдет очередной этап самого масштабного из международных исследований — PISA (Programme for International Student Assessment).
Каждые три года оно тестирует у школьников и студентов колледжей старше 15 лет (но не старше 16 лет и 2 месяцев) уровень знаний и умение практически их применять. PISA, разработанную в 1997 году, проводят с 2000 года, а трехлетний цикл сбился лишь однажды: исследование 2021 года из-за ковида сдвинулось на год.
Качество образования PISA изучает по четырём основным направлениям: читательская, математическая, естественно-научная и компьютерная грамотности.
Что такое все эти грамотности, почему так звучат названия изучаемых направлений? PISA не проверяет знание теоремы Пифагора и не ждет от учеников определения закона Авогадро. Напротив, школьникам предлагают интересные практические задания, которые могут показать знание сразу нескольких дисциплин, умение мыслить и применять знания на практике.
Скажем, в тесте на естественно-научную грамотность студентам предлагалось показать, что они знают о беге в жаркую погоду. Надо было проложить пеший маршрут через Сахару, рассчитать необходимое количество воды на день, если известны температура воздуха, даны показатели потери воды при различных температурах и темпе движения и так далее. Для решения нужны знания анатомии человека, климатических особенностей пустыни, навыки применять географические сведения, умение пользоваться картой и вести простейшие расчеты.
В других тестах нужно было оценивать выгоду различных типов ипотечного кредитования, рассчитывать сложные проценты и принимать стратегические решения, оперируя знаниями сразу в нескольких областях.
Неудивительно, что задания PISA нетривиальны: в их составлении принимают участие многие научные центры и передовые институты педагогики и образования всего мира.
Конечно, исследования исследованиями, но результаты PISA принимают во внимание во всем мире, они служат данными для рейтингования стран.
Например, по суммарным данным за 2000–2015 годы, лучшее среднее образование дают в Восточной Азии: Китае, Корее, Сингапуре, Японии. В Европе же в десятке лидеров Финляндия, Эстония, Швейцария, Польша и Нидерланды.
А что же Россия
Мы привыкли считать российское образование одним из лучших в мире, поэтому первое участие России в исследованиях PISA многих не впечатлило: мы оказались в третьей десятке стран по умению применять теоретические знания на практике.
С 2000-го в рейтингах PISA Россия занимает места около 30-го: выше — по математике, чуть ниже — по чтению, и еще ниже — по естественно-научной грамотности. Правда, в исследовании PISA в 2015 году по финансовой грамотности Россия стала 4-й в мире. По количеству же баллов, набираемому школьниками в каждом цикле, показатели России растут, но все еще остаются в третьем и четвертом десятке.
PISA демонстрирует и то, как географически зависимо наше образование: традиционно исследование проводится широко — в столицах, городах-миллионниках, в сельской школе. Результаты Москвы значительно опережают провинцию — по всем компетенциям школьники столицы попали в десятку лучших результатов мира.
На конференции в апреле 2021 года министр просвещения Сергей Кравцов указывал, что по показателям исследований читательской и математической грамотности PIRLS и TIMSS Россия регулярно занимает место среди стран с лучшими показателями качества образования, а результат России в PISA хоть и выше среднего показателя и растет от года к году, но его нельзя назвать лидирующим. Очевидно, что российским школьникам надо учиться применять знания на практике, и это вызов для всей образовательной системы страны.
«PISA — самое сложное исследование для наших школьников, где имеющиеся результаты пока находятся не на том уровне, который нам бы хотелось видеть. Улучшение результатов наших школьников в этом международном исследовании способно серьезно повысить позиции России по качеству общего образования по сравнению с другими странами», — отмечал руководитель Рособрнадзора Анзор Музаев в ходе пресс-конференции в ноябре 2020 года.
PISA-2022
Объектом особенного внимания ближайшего цикла исследования станет математическая грамотность, и впервые исследование будет изучать креативное мышление. Хотя — как и обычно — будут проверены все грамотности: математическая, естественно-научная, читательская и финансовая. Еще в этом раунде впервые будут изучать оценку личного благополучия учащихся и учителей.
Математическая грамотность — способность человека применять и интерпретировать математику для решения задач в разнообразных практических условиях.
Она предусматривает знание понятий, фактов и предполагает свободное применение математических инструментов и процедур. Особое внимание уделяется использованию математики для решения практических задач в различных контекстах.
В концепции по математике исследования PISA-2021 обещают, что исследование сосредоточится на математическом рассуждении — способности рассуждать логически и формулировать аргументы. Это навык, который все больше ценится в современном мире.
Обещают проверить умение школьников делать д едуктивные и индуктивные умозаключения, оценивать ситуации, выбирать стратегии, делать логические выводы, описывать решения и их применение на практике.
Анонсировано, что м атематические знания будут проверять по четырем категориям (см. стр. 10) : количество, неопределенность и данные, изменение и зависимости, пространство и форма.
Каков формат? Школьникам предложат компьютерное тестирование и заполнение анкеты. На тесты дают два часа, на анкеты — чуть меньше часа. Предложат анкетирование и учителям.
Если вы заинтересовались, мы с вами! Правда, итогов придется подождать: результаты PISA-2022 будут официально объявлены в декабре 2023 года.
Когда будем исследоваться
Основной этап международного исследования намечен на апрель 2022 года — ровно через полгода. Исследование пройдет во всей России, затронет учащихся старше 15 лет и трех месяцев и 16 лет и двух месяцев, в прошлом исследовании ребята представляли 42 региона РФ, видимо, и в 2022-м будет так же.
В апреле 2021-го в России прошел подготовительный (региональный) этап исследования PISA-2022. В нем участвовали три тысячи школьников из 58 образовательных организаций пяти регионов страны — Москвы, Вологодской, Рязанской, Московской и Орловской областей. В рамках «PISA для школ» инструментарий PISA используется вне цикла международного исследования для получения данных о состоянии системы образования России.
В 2021 году исследование «PISA для школ» пройдет масштабно — на общероссийском уровне — и затронет Амурскую, Кировскую, Мурманскую, Новосибирскую, Свердловскую, Калужскую, Орловскую области, Пермский и Красноярский край, Республики Марий Эл, Дагестан, Алтай, Адыгею и Удмуртию.
Читать результаты региональной оценки предыдущего исследования очень любопытно — к примеру, такое исследование опубликовано для Московской области. Оно продолжает демонстрировать образовательное неравенство в России — показатели Московской области в нем высоки, как и показатели Москвы в международном исследовании.
В общем, есть о чем подумать — о том, как у нас преподают физику, химию, биологию и географию, какие результаты покажут наши школьники по креативности и по уровню критического мышления, какими будут результаты по математике и что именно укажут школьники в графе «Удовлетворенность образовательным процессом».