Мониторинг качества проведения

Мониторинг качества проведения

2012

1

222

333

Организация PISA

КонсорциумКонсорциум

Национальные центры Национальные центры

НаблюдателиНаблюдатели

качества качества проведения проведения

PISAPISA

ШколыШколы УчащиесяУчащиеся

Проводящие Проводящие тестирование и тестирование и

Школьные Школьные координаторыкоординаторы

Техническая Техническая консультативная консультативная

группа группа (TAG)(TAG)

Эксперты по Эксперты по грамотности грамотности чтения чтения (REG)(REG)

Эксперты по Эксперты по математическойматематической

грамотности грамотности (MEG)(MEG)

Эксперты по Эксперты по естественноестественно--науч-науч-ной грамотности ной грамотности

(SEG)(SEG)

Эксперты по Эксперты по финансовой финансовой

грамотностиграмотности (FEG) (FEG)

Эксперты по Эксперты по анкетированию анкетированию

(QEG)(QEG)

544

Гарантии качества PISA

• Контроль качества– Инструменты, разработанные для того, чтобы

обеспечить сбор данных в соответствии с техническими стандартами PISA

• Мониторинг качества – Наблюдатели наблюдают за проведением

тестирования во всех участвующих странах, затем проводится оценка этих наблюдений

• Обеспечение качества– При анализе данных оцениваются все аспекты,

которые могли бы повлиять на результаты исследования

Выбор школ для наблюдения

• Разные по типу ОУ (это дает возможность провести наблюдение условий и процедуры тестирования в разных контекстах).

• Выбор ОУ осуществляется совместно Национальным центром, Международным консорциумом исследования и наблюдателем. Важное значение имеет расположение школы и даты проведения тестирования.

• Для наблюдения отбирают 7 основных и 7 запасных школ.

5

3

Обеспечение качества организации и проведения PISA

Наблюдатель за обеспечением качества

организации и проведения исследования

Задача наблюдателя – обеспечение достоверности результатов тестирования и их сопоставимости с результатами других стран-участниц исследования

7

Обеспечение качества организации и проведения PISA

Задача наблюдателя – собрать и передать информацию о соответствии организации и проведения тестирования международным стандартам:– проверка подготовки к тестированию (доставка и

комплектность материалов, аудитория, уровень подготовки Проводящего тестирование);

– наблюдение за проведением тестирования (соблюдение сценария проведения тестирования, распределение времени);

– интервьюирование Координатора ОУ и/или Проводящего тестирование;

– заполнение специальной анкеты и ее передача в консорциум

8

Обеспечение качества организации и проведения PISA

Наблюдатель

ОБЪЕКТИВНО отвечает на ВСЕ вопросы, заполняя специальную анкету

наблюдателя.

Наблюдатель НЕ ВМЕШИВАЕТСЯ в процедуру тестирования.

9

Действия наблюдателяДействия наблюдателя

Раздел 1: Предварительные действия Проводящего тестирование

Раздел 2: Наблюдение тестирования, заполнение анкеты наблюдателя

Раздел 3: Общие впечатленияРаздел 4: Интервью с Координатором ОУ

и/или Проводящим тестирование

10

Интервью со Школьным координатором

• После проведения тестирования• 10-15 минут• Собирает информацию о более широком

контексте проведения анкетирования в школах: сотрудничества учителей, администрации, учеников, родителей помещения для проведения исследования составления и заполнение списков учащихся получения материалов для проведения исследования

Что оценивает наблюдатель

• Подготовленность Проводящего тестирование• Помещение для проведения тестирования• Опоздавшие, как с ними поступают• Степень присутствия учащихся• Распределение тестовых материалов (тетрадей, анкет

или запуск компьютеров и т.п.)• Следование сценарию• Как происходит контроль времени• Помогают ли учащимся• Дисциплина• Соблюдение секретности материалов• Технические сложности (компьютерное)• Насколько эффективны деятельность и материалы

Национального центра и вообще инструментарий11

12

Обеспечение качества организации и проведения PISA

Каким должен быть наблюдатель?

ответственным

дипломатичным

профессиональным

независимым от ОУО субъекта РФ

13

Спасибо!

Дюкова Светлана Евгеньевна, Научный сотрудник лаборатории дидактики географии ИСМО РАО

Тел.: +7-929-613-38-00E-mail: svetl.771@rambler.ru