Особенности организации и проведения международного исследования оценки качества образования pisa-2018 в России. Основные подходы к оценке функциональной грамотности
жүктеу/скачать 2,76 Mb. Pdf көрінісі
|
PISA-2018 вебинар 1
Краткая информация об
исследовании PISA-2018 Проводит: OECD - Организация экономического сотрудничества и развития Координирует: ETS – Центр образовательного тестирования США Циклы мониторинга: 3-9 лет, в 2018 г. 7-ой цикл исследования; 3-ий цикл основной области – читательская грамотность (2000, 2009 и 2018) Технологии проведения: на компьютерах в большинстве стран Выборка: возрастная (15-летние учащиеся) Страны-участницы: более 70 стран Австралия Австрия Албания Алжир Аргентина Бельгия Болгария Бразилия Великобритания Венгрия Вьетнам Германия Гонконг Греция Грузия Дания Доминиканская Республика Израиль Индонезия Иордания Ирландия Исландия Испания Италия Казахстан Канада Катар Китай Колумбия Коста-Рика Латвия Ливан Литва Люксембург Макао (Китай) Македония Малайзия Мальта Мексика Молдова Нидерланды Новая Зеландия Норвегия ОАЭ Перу Польша Португалия Республика Корея Республика Косово Российская Федерация Румыния Сербия Сингапур Словацкая Республика Словения США Таиланд Тайвань Тринидад и Тобаго Тунис Турция Уругвай Страны-участницы PISA-2015 Финляндия Франция Хорватия Черногория Чешская Республика Чили Швейцария Швеция Эстония Япония Всего 72 страны Австралия Австрия Албания Алжир Аргентина Баку (Азербайджан) Беларусь Бельгия Болгария Босния и Герцеговина Бразилия Бруней-Даруссалам Великобритания Венгрия Вьетнам Германия Гонконг Греция Грузия Дания Доминиканская Р-ка Израиль Индонезия Иордания Ирландия Исландия Испания Италия Казахстан Канада Катар Колумбия Косово Коста-Рика Латвия Ливан Литва Люксембург Макао (Китай) Македония Малайзия Мальта Марокко Мексика Молдова Нидерланды Новая Зеландия Норвегия ОАЭ Перу Польша Португалия Республика Корея Российская Федерация г. Москва Республика Татарстан Московская область 9 регионов РФ (финансовая грамотность) Румыния Саудовская Аравия Сербия Сингапур Словацкая Республика Словения Страны-участницы PISA-2018 США Таиланд Тайвань Тринидад и Тобаго Турция Украина Уругвай Филиппины Финляндия Франция Хорватия Черногория Чешская Республика Чили Швейцария Швеция Шотландия Эстония Япония Более 80 стран Особенности проведения исследования PISA в 2018 году • Переход на компьютерный формат: – лучше отражает реальную ситуацию получения и использования информации учащимися – позволяет расширить спектр оцениваемых умений (чтение множественных текстов из разных источников, проведение исследований) – позволяет повысить эффективность измерения посредством введения адаптивного тестирования • Требуется изменение формата заданий из предыдущих циклов; – отбор заданий со стабильными характеристиками; – разработка заданий нового типа (например, на чтение множественных текстов и интерактивных заданий с симуляциями) • Сохранение основных направлений (математическая, естественнонаучная, читательская и финансовая грамотности); приоритетная область – читательская грамотность Модель оценки функциональной грамотности: PISA-2015 Математическая грамотность Читательская грамотность Решение проблем в сотрудничестве Естественнонаучная грамотность 4% 4% 4% 33% 33% 22% Финансовая грамотность Модель оценки функциональной грамотности: PISA-2018 Математическая грамотность Естественнонаучная грамотность Глобальные компетенции Читательская грамотность 4% 4% 4% 33% 33% 22% Финансовая грамотность 13 3. Основные подходы к оценке функциональной грамотности Чему должны научиться дети Schleicher A., Ramos G. Global competency for an inclusive world // OECD, 2016. URL: https://www.oecd.org/pisa/aboutpisa/Global-competency-for-an-inclusive-world.pdf (дата доступа 01.06.2016) Парадокс компетентности Компетентность ( действенные знания, умения, способы ) обнаруживает себя • за пределами учебных ситуаций, • в задачах, не похожих на те, где эти знания, умения, способы приобретались. Российская академия образования Тенденции изменения в оценке образовательных достижений • Изменение целевых установок (от оценки ЗУН к оценке грамотности и компетентности) • Изменение концептуальных рамок оценки и изменение инструментария ( изменение основных характеристик заданий, увеличение доли контекстных заданий, увеличение доли структурированных заданий) • Изменение в технологиях ( переход на электронные носители, введение интерактивных заданий) 16 Математическая грамотность (исследование PISA) Проблема, в контексте Результаты в контексте Математическая проблема Математические результаты Оценивать Интерпретировать Применять Формулировать РЕАЛЬНЫЙ МИР МАТЕМАТИЧЕСКИЙ МИР Математическая грамотность – это способность индивидуума формулировать, применять и интерпретировать математику в разнообразных контекстах. Она включает математические рассуждения, использование математических понятий, процедур, фактов и инструментов, чтобы описать, объяснить и предсказать явления. Она помогает людям понять роль математики в мире, высказывать хорошо обоснованные суждения и принимать решения, которые должны принимать конструктивные, активные и размышляющие граждане. Естественнонаучная грамотность (исследование PISA) Естественнонаучная грамотность – это способность человека занимать активную гражданскую позицию по вопросам, связанным с естественными науками, и его готовность интересоваться естественнонаучными идеями. Естественнонаучно грамотный человек стремится участвовать в аргументированном обсуждении проблем, относящихся к естественным наукам и технологиям, что требует от него следующих компетентностей: научно объяснять явления, оценивать и планировать научные исследования, научно интерпретировать данные и доказательства. Модель естественнонаучной грамотности исследования PISA-2015 Контексты Личные, местные/националь ные и глобальные проблемы, как современные, так и исторические, которые требуют понимания вопросов науки и технологий. Компетенции Способность научно объяснять явления, применять методы естественнонаучного исследования, интерпретировать данные и использовать научные доказательства для получения выводов. Отношение Отношение к науке, которое характеризуется интересом к науке и технологиям, пони- манием ценности науч- ного изучения вопросов , там, где это необходимо, и осведомленностью о проблемах окружающей среды, а также осознанием важности их решения. Знания Понимание основных фак- тов, идей и теорий, обра- зующих фундамент научного знания. Такое знание вклю- чает в себя знание о приро- де и технологиях (знание содержания), знание о методах получения научных знаний (знание процедур), понимание обоснованности этих процедур и их использования (методологическое знание). От учащихся требуется продемонстрировать компетенции в определенном контексте Знания и отношение определяют результаты учащихся Читательская грамотность (исследование PISA) Читательская грамотность – способность человека понимать и использовать письменные тексты, размышлять о них и заниматься чтением для того, чтобы достигать своих целей, расширять свои знания и возможности, участвовать в социальной жизни. Опора на текст Опора на внетекстовое знание 3. осмыслить и оценить содержание текста форму текста 1. найти и извлечь (информацию) 2. интегрировать и интерпретировать (сообщения текста) Читательская грамотность (PISA) Финансовая грамотность (исследование PISA) 22 Финансовая грамотность включает знание и понимание финансовых терминов, понятий и финансовых рисков, а также навыки, мотивацию и уверенность, необходимые для принятии эффективных решений в разнообразных финансовых ситуациях, способствующих улучшению финансового благополучия личности и общества, а также возможности участия в экономической жизни. Финансовая грамотность: составляющие 23 Содержание: знание и понимание • Деньги и операции с ними (30-40%) • Планирование и управление финансами (25- 35%) • Риски и вознаграждения (15-25%) • Финансовая среда (отдельные вопросы из области финансов) (10-20%) Познавательная деятельность: познавательные умения, действия и стратегии • Выявление финансовой информации (15-25%) • Анализ информации в финансовом контексте (15-25%) • Оценка финансовых проблем (25-35%) • Применение финансовых знаний и понимание (25-35%) Контекст: предлагаемые ситуации • Образование и работа (10-20%) • Дом и семья (30-40%) • Личные траты, досуг и отдых (35-45%) • Общество и гражданин (5-15%) Российская академия образования Модель области оценки 10 Контексты (ситуации) Процессы (Познавательная деятельность) (умения, стратегии и т.п.) Содержание Глобальные компетенции – способность - критически рассматривать с различных точек зрения проблемы глобального характера и межкультурного взаимодействия; - осознавать как культурные, религиозные, политические, расовые и иные различия могут оказывать влияние на восприятие, суждения и взгляды – наши собственные и других людей; - вступать в открытое, уважительное и эффективное взаимодействие с другими людьми на основе разделяемого всеми уважения к человеческому достоинству Глобальные компетенции: понятие Глобальные компетенции: модель Навыки • Аналитическое и критическое мышление • Способность взаимодействовать уважительно, сообразно, эффективно • Способность сочувствовать • Гибкость Знание, Понимание • Осознание и понимание глобальных проблем • Осознание межкультурных различий, взаимопонимание Отношения • Открытость представителям иных культур • Уважение других культур и культурных отличий • Широта взглядов • Ответственность КОМПОНЕНТЫ ЦЕННОСТИ Человеческое достоинство Культурное разнообразие Особенности заданий исследования PISA • Задача, поставленная вне предметной области и решаемая с помощью предметных знаний, например, по математике • В каждом из заданий описываются жизненная ситуация, как правило, близкая понятная учащемуся • Контекст заданий близок к проблемным ситуациям, возникающим в повседневной жизни • Ситуация требует осознанного выбора модели поведения • Вопросы изложены простым, ясным языком и, как правило, немногословны • Требуют перевода с обыденного языка на язык предметной области (математики, физики и др.) • Используются иллюстрации: рисунки, таблицы. Основные характеристики заданий исследования PISA • Типы знаний (содержательное, процессуальное, методологическое) • Компетенции (научное объяснение явлений, …) • Контекcт/ситуация (здоровье; природные ресурсы; окружающая среда; опасности и риски; новые знания в области науки и технологии) /личная, местная/ национальная, глобальная • Когнитивный уровень (низкий, средний, высокий) • Тип задания (стандартное или интерактивное) • Форма задания (с закрытым или открытым ответом) Параметры для анализа заданий на соответствие компетентностному подходу Наличие ситуационной значимости контекста Необходимость перевода условий задачи, сформулированных с помощью обыденной семантики на язык, например, математики (математическое моделирование) Новизна формулировки задачи, неопределенность Особенности оценки выполнения задания Понятия «верный ответ» или неверный ответ» не применяются (На некоторые вопросы не имеется «верного» ответа как такового) Два вида шкал: Дихотомическая шкала • «ответ принимается полностью» • «ответ не принимается» Политомическая шкала • «ответ принимается полностью» • «ответ принимается частично» • «ответ не принимается» Уровни функциональной грамотности в исследовании PISA Самостоятельно мыслящие и способные функционировать в сложных условиях 4 уровень – проявляется способность использовать имеющиеся знания и умения для получения новой информации 2 уровень – пороговый, при достижении которого учащиеся начинают демонстрировать применение знаний и умений в простейших не учебных ситуациях М Ч Е 669 708 708 6 607 626 633 5 545 553 559 4 482 480 484 3 420 407 409 2 358 335 335 1 Среднее значение международной шкалы 500 400 600 Примеры заданий На рынке помидоры можно купить килограммами или ящиками. НА РЫНКЕ НОВОЕ ПРЕДЛОЖЕНИЕ 2,75 зедов за 1 кг 22 зеда за ящик 10 кг Вопрос 2: НА РЫНКЕ (уровень 2, 459 баллов) Вопрос 3: НА РЫНКЕ (уровень 1, 398 баллов) Запишите обоснование, поддерживающее данное утверждение. Для некоторых людей покупка ящика помидоров может быть плохим финансовым решением. Объясните, почему. Алла Петровна получила кредит в 8000 зедов от финансовой компании «Первый кредит». Годовая процентная ставка на кредит составляет 15%. Ее ежемесячные выплаты по возврату кредита составляют 150 зедов. После одного года долг Аллы Петровны все еще составляет 7400 зедов. Другая финансовая компания, «Лучший кредит», предлагает Алле Петровне кредит в 10 000 зедов с годовой процентной ставкой 13%. Ее ежемесячные выплаты по возврату кредита также будут составлять 150 зедов. Вопрос 1: НОВОЕ ПРЕДЛОЖЕНИЕ (полный ответ: уровень 5, 663 балла; частично верный ответ: уровень 3, 510 баллов) Если Алла Петровна возьмет кредит от компании «Лучший кредит», она тут же вернет свой нынешний кредит. Какие две другие финансовые выгоды получит Алла Петровна, если возьмет кредит от компании «Лучший кредит»? Вопрос 2: НОВОЕ ПРЕДЛОЖЕНИЕ (уровень 4, 582 балла) С каким возможным негативным финансовым последствием столкнется Алла Петровна, если согласится взять кредит от компании «Лучший кредит»? Примеры вопросов из области критического рассмотрения проблем глобального характера и межкультурного взаимодействия Возможные вопросы: • Как связаны определенные действия с развитием глобальных проблем? • Опишите одно позитивное и одно негативное последствие описанного действия. • Являются ли ситуации, описанные в таблице, примерами возможных негативных (позитивных) последствий? • Являются ли данные предложения краткосрочной или долгосрочной мерой решения описанной проблемы? И др. Примеры вопросов из области оценки влияния различий (культурных, религиозных, политических или иных) на восприятие, суждения и взгляды людей Возможные вопросы: • Помогают ли приведенные факты объяснить … ? • Приведите одну социальную и одну финансовую причину, объясняющую, почему … • Могли бы меры (ранее описаны) побудить изменить свои действия или планы? • Объясняют ли причины (приведены) решение сделать … ? • Могут ли ответы на вопросы, приведенные ниже, помочь проверить утверждение? • Какую еще информацию нужно рассмотреть прежде чем согласиться с … ? Характеристика российской выборки PISA-2018 • 43 региона • 265 образовательных организаций общего и профессионального образования (200 – основного и среднего образования; 15 – начального и среднего профессионального образования) • 10335 учащихся 15-летнего возраста (87% – учащиеся 7-9 классов, 10% – учащиеся 10-11 классов, 3% – учащиеся из организаций профессионального образования) P=0.33 P=0.33 P=0.22 P=0.04 P=0.04 P=0.04 6300 150 школ 42 учащихся Базовый дизайн компьютерного варианта теста PISA-2018 12 вариантов ЧТ ЕСТ 12 вариантов ЧТ, МАТ 6 вариантов ЧТ, Гл К 12 вариантов ЧТ, ЕСТ, Гл К 12 вариантов ЧТ, ЕСТ, МАТ 12 вариантов ЧТ, МАТ, Гл К S S R1 R2 S S R2 R3 S S R3 R4 S S R4 R5 S S R5 R6ab S S R6ab R1 R1 R3 S S R2 R4 S S R3 R5 S S R4 R6ab S S R5 R1 S S R6ab R2 S S S S M1 M2 S S M2 M3 S S M3 M4 S S M4 M5 S S M5 M6ab S S M6ab M1 M1 M3 S S M2 M4 S S M3 M5 S S M4 M6ab S S M5 M1 S S M6ab M2 S S S S M1 R1 S S R2 M2 S S M3 R3 S S R4 M4 S S M5 R5 S S R6ab M6ab R1 M1 S S M2 R2 S S R3 M3 S S M4 R4 S S R5 M5 S S M6ab R6ab S S S S C1 M1 S S M2 C2 S S C3 M3 S S M4 C3 S S C2 M5 S S M6ab C1 M1 C2 S S C3 M2 S S M3 C1 S S C1 M4 S S M5 C3 S S C2 M6ab S S S S R1 C1 S S C2 R2 S S R3 C3 S S C3 R4 S S R5 C2 S S C1 R6ab C2 R1 S S R2 C3 S S C1 R3 S S R4 C1 S S C3 R5 S S R6ab C2 S S S S C1 C2 S S C2 C3 S S C3 сайт: www.centeroko.ru C2 C1 S S сайт: www.centeroko.ru C3 C2 S S C1 C3 S S 66 вариантов Первый час Второй час Проведение тестирования в образовательных организациях 30-60 мин • Подготовка компьютерного класса 15 мин • Вход в программу, выполнение тренировочного теста 60 мин • Основное тестирование – Раздел 1 5 мин • Перерыв 60 мин • Основное тестирование – Раздел 2 15 мин • Перерыв 55 мин • Анкетирование 10-20 мин • Завершение работы, сбор материалов Ознакомление с форматом работы и заданий Тренировочные задания Сбор контекстной информации Анкетирование в ходе исследования PISA 8 анкет: • 2 – обязательные анкеты (Анкета для учащихся, Анкета для администрации ОО) • 6 дополнительных анкет – 4 анкеты для учащихся: • Использование ИКТ • Образовательная траектория • Финансовая грамотность • Благополучие – Анкета для учителей – Анкета для родителей Управление Преподавание и обучение Школьный контекст Школа Учащиеся Отношения Анкета для администрации ОО в режиме онлайн • Для заполнения Анкеты для администрации ОО необходимо пройти по ссылке: http://pisa.ets.org/SchoolQuestionnaire Анкета для администрации ОО заполняется в течение недели, на которой проходит исследование в регионе. 41 Обеспечение качества исследования PISA Сравнимая база данных высокого качества Обеспечить руководство стран надежными данными, на основе которых можно принимать управленческие решения Основная цель PISA Технические стандарты качества Документы Верификация перевода Качество печати Сопоставление инструментария по циклам Адаптация руководств TAS, BAS, QAS, Международная программа для выборки учащихся … Международный мониторинг качества Национальный мониторинг качества + Проц ед уры Руководства для национальных координаторов Данные для оценки качества проведения Процедуры Принятие решения о включении данных страны в международную базу Главные детерминанты качества школьного образования • Качество школьного образования в основном определяется качеством профессиональной подготовки педагогов (по результатам PISA) • Качество образовательных достижений школьников в основном определяется качеством учебных заданий, предлагаемых им педагогами (по результатам ITL, PISA) Для дополнительной информации Организация Экономического Сотрудничества и Развития (ОЭСР) (Organization for Economic Cooperation and Development, OECD) – www.oecd.org/edu/pisa Центр оценки качества образования ИСРО РАО – http://centeroko.ru тел.: +7-495-621-76-36 – Ковалева Галина Сергеевна – национальный координатор России (электронная почта – centeroko@mail.ru ) Вебинары Центра оценки качества образования ИСРО РАО «Проведение международного исследования PISA-2018 в России» 1. Организация и проведение международного исследования PISA-2018 в России, 15 марта 14:00 2. Оценка математической грамотности в рамках международного исследования PISA-2018,16 марта 13:00 3. Оценка читательской грамотности в рамках международного исследования PISA-2018, 16 марта 15:00 4. Оценка читательской грамотности учащихся основной школы. Использование стандартизированных измерительных материалов, созданных российскими разработчиками с учетом требований исследования PISA, 20 марта 14:00 5. Оценка финансовой грамотности в рамках международного исследования PISA-2018, 21 марта 13:30 6. Оценка естественнонаучной грамотности в рамках международного исследования PISA-2018, 28 марта 13:00 7. Новое направление международного исследования PISA-2018 – оценка сформированности глобальных компетенций, 28 марта 15:00 Спасибо за внимание! Ковалева Галина Сергеевна, руководитель Центра оценки качества образования Института стратегии развития образования РАО Тел./факс: (495)-621-76-36 e-mail: centeroko@mail.ru сайты: www.centeroko.ru 46 жүктеу/скачать 2,76 Mb. Достарыңызбен бөлісу:
|