1

I n f o r m a t i o n s sur l’étude PISA 2015

3

Objectifs de l’étude PISA Dans quelle mesure les jeunes sont-ils préparés aux défis actuels et futurs de leur vie privée et professionnelle et à l‘apprentissage tout au long de la vie ?

A quel point les différents systèmes éducatifs sont-ils efficaces et équitables ?

Quelle est l‘évolution des compétences des élèves de 15 ans, des systèmes éducatifs et de l‘environnement scolaire au fil du temps ?

A la demande de l‘Organisation de coopération et de développement économiques (OCDE), il est procédé, tous les trois ans, à une évaluation et à une comparaison internationale des compétences essentielles des élèves de 15 ans dans les domaines de la lecture, des mathématiques et des sciences naturelles. L‘objectif poursuivi par PISA (Programme for International Student Assessment) ne consiste toutefois pas à simplement faire reproduire par les jeunes les connaissances acquises à l‘école, mais à analyser dans quelle mesure ils sont à même d‘appliquer leurs connaissances et compétences à des questions ou situations pratiques. PISA évalue également des compétences transversales, telles la résolution de problèmes, et des dimensions non-cognitives (p.ex. la motivation à apprendre).

Le programme vise à mettre à disposition des pays des indicateurs comparatifs internationaux sur les connaissances et savoir-faire des jeunes ainsi que sur les systèmes éducatifs et les environnements scolaires. Ces données permettront d‘identifier les forces et les faiblesses et pourront contribuer ainsi à l‘amélioration des systèmes éducatifs.

4

PISA 2015: Pays participants

Pays de l‘OCDE Pays partenaires

Allemagne AlbanieAustralie AlgérieAutriche ArgentineBelgique BrésilCanada BulgarieChili République populaire de ChineCorée Taipei chinoisDanemark Costa RicaEspagne République dominicaineEstonie GéorgieÉtats-Unis Hong Kong (Chine)Finlande IndonésieFrance JordanieGrande-Bretagne KazakhstanGrèce QatarHongrie ColombieIrlande KosovoIslande CroatieIsraël LettonieItalie LibanJapon LituanieLuxembourg Macao (Chine)Mexique MalaisieNorvège MalteNouvelle Zélande MacédoinePays-Bas MoldaviePologne MonténégroPortugal PérouRépublique slovaque RoumanieRépublique Tchèque Fédération de RussieSlovénie SingapourSuède ThaïlandeSuisse Trinité-et-TobagoTurquie Tunisie

UruguayÉmirats Arabes Unis

Vietnam

5

Caractéristiques essentielles de PISA 2015PISA est une étude cyclique qui teste tous les trois ans les connaissances et aptitudes des élèves dans les domaines de la lecture, des mathématiques et des sciences naturelles. Chaque cycle PISA met l‘accent sur un des trois domaines en question. Le domaine majeur d‘évaluation de l‘étude PISA 2015 porte sur les sciences. La compréhension en lecture et les mathématiques seront examinés à titre accessoire. Dans le cadre d‘une option internationale, le Luxembourg participe en outre à l‘évaluation des compétences des élèves dans le domaine de la résolution collaborative de problèmes.

Au Luxembourg et dans la plupart des pays participants, l’ensemble de l’étude PISA 2015 se fera sur ordinateur. Le logiciel d‘évaluation se trouve sur des clés USB. Chaque élève se verra attribuer des données de connexion lui permettant de lancer les épreuves.A l‘instar des cycles précédents, les élèves pourront choisir la langue des épreuves (allemand ou français). Les élèves des sections anglophones feront les tests en langue anglaise.

PISA 2000

PISA 2003

PISA 2006

PISA 2009

PISA 2012

PISA 2015

LectureMathématiquesSciences

LectureMathématiquesSciences

LectureMathématiquesSciences

LectureMathématiquesSciences

LectureMathématiquesSciences

LectureMathématiquesSciences

Test papier-crayon

Test papier-crayon

Test papier-crayon

Test papier-crayon

Test papier-crayon

Test sur ordinateur

6

Domaines du test : Que mesure PISA? Pour chaque domaine examiné, il a été élaboré un cadre d‘évaluation qui décrit la structure et le contenu du domaine en question. Le cadre complet d‘évaluation PISA peut être téléchargé à l’adresse http://www.oecd.org/pisa/pisaproducts/pisa2015draftframeworks.htm.

Compétences en lecturePISA entend par compétences en lecture la capacité de comprendre et d‘exploiter des textes de tous genres et issus de différents contextes, de mener une réflexion sur le texte en question et de développer une compréhension plus approfondie de ce qui a été lu. Ces compétences doivent permettre aux jeunes de faire évoluer leurs connaissances et capacités et de participer activement à la vie en société. Le cadre d‘évaluation PISA distingue trois domaines pertinents des compétences en lecture :

• Textes Les jeunes et adultes se trouvent confrontés tous les jours à une vaste gamme de textes qui diffèrent par leur format et leur structure rhétorique (p. ex. description, narration, ex-plication, argumentation, instruction). PISA utilise les formats de textes suivants :

- textes continus : textes rédigés en continu tels que des romans, articles de journaux, rédactions, nouvelles et lettres

- textes non continus : documents reprenant des informations sous forme de listes, formulaires, horaires, graphiques ou diagrammes

• Aspects Les aspects de la lecture décrivent les approches, à savoir les stratégies et intentions d’un lecteur/d’une lectrice par rapport à un texte. PISA évalue trois aspects différents de la lecture :

- localiser et extraire l‘information, c.-à-d. rechercher, sélectionner et utiliser certaines ou plusieurs informations dans un texte

- intégrer et interpréter, c.-à-d. comprendre le sens d‘un ou de plusieurs paragraphes d‘un texte, en tirer des conclusions et développer ainsi une compréhension globale du texte

- réfléchir et évaluer, c.-à-d. établir des liens entre le texte et ses propres connaissances, conceptions et expériences

• Situations Les textes utilisés dans le cadre de l‘étude PISA se rapportent à différentes situations de la vie courante, lors desquelles les adultes ou les jeunes se trouvent fréquemment confrontés à des textes similaires : - lecture à usage personnel, p.ex. romans - lecture à usage public, p.ex. documents

officiels, formulaires - lecture à usage professionnel, p.ex. modes

d‘emploi - lecture à usage éducatif, p.ex. manuels

7

Compétences en mathématiquesPISA part de l’idée qu‘au cours de leur formation scolaire, les jeunes devraient apprendre à utiliser de manière fonctionnelle les compétences mathématiques dans différentes situations de la vie quotidienne et professionnelle. Les compétences en mathématiques telles que testées par PISA englobent donc non seulement la réalisation d‘opérations mathématiques spécifiques, mais également l‘application des mathématiques dans la vie réelle en vue de résoudre un problème spécifique.Le cadre d‘évaluation PISA distingue trois domaines pertinents des compétences en mathématiques :

• Contenus - variations et relations : tous types de liens

relationnels et fonctionnels entre des objets mathématiques, comme p.ex. la description de relations par des équations ou inéquations

- espace et formes : tous types de configurations, figures et modèles plats ou spatiaux, comme p.ex. l‘identification de formes et motifs géométriques

- quantité : tous types de quantifications, c.-à-d. l‘utilisation de nombres pour la description et l‘organisation de situations, telles que le calcul arithmétique, la manipulation de grandeurs, la compréhension d‘ordres de grandeur

- incertitude et données : tous types de phénomènes et de situations comprenant des données statistiques ou aléatoires, p.ex. l‘analyse et l‘interprétation de données fournies

• Processus Il a été défini trois processus mathématiques fondamentaux qui s‘avèrent pertinents pour la résolution d‘un problème :

- formuler des situations de façon mathématique, c.-à-d. donner une structure mathématique à un problème résultant d‘un contexte donné

- employer des concepts, faits, procédures et raisonnements mathématiques afin de résoudre un problème mathématique

- interpréter, appliquer et évaluer des résultats mathématiques, c.-à-d. réfléchir à des solutions, résultats et conclusions mathématiques

Ces trois processus reposent sur les six facultés mathématiques générales suivantes :

- résolution de problème - modélisation - raisonnement logique et argumentation - communication - représentation - utilisation d’un langage symbolique,

formel et technique

• Situations - Elles se réfèrent au contexte, dans lequel

est intégré un problème mathématique. Les contextes sont subdivisés en situations personnelles, éducatives, professionnelles, sociétales et scientifiques.

8

Compétences en sciences Notre société se voit confrontée actuellement à des défis sans cesse grandissants et tel sera également le cas dans les années à venir. Parmi les défis à relever, citons notamment l‘approvisionnement en denrées alimentaires et en eau potable, le contrôle des maladies infectieuses, l‘approvisionnement énergétique et le changement climatique. Ces problématiques revêtent une importance particulière, tant sur le plan individuel que national et international et sont étroitement liées aux sciences naturelles et à la technique afférente. Afin de pouvoir faire face à ces défis à l‘avenir, il importe que les élèves développent une compréhension fondamentale des con-tenus, méthodes et recherches scientifiques.Le cadre d‘évaluation PISA distingue trois domaines pertinents des compétences en sciences :

• Connaissances scientifiques - connaissances portant sur des faits,

concepts et contenus : connaissances concernant le monde naturel dans les domaines de la physique, de la chimie, de la biologie, des sciences de la terre, des sciences appliquées et de la technique

- connaissances procédurales : connaissances concernant l‘application de méthodes et procédures scientifiques, c.-à-d. connaissances en matière de conception de tests, d’erreurs de mesure, de techniques de contrôle

- connaissances épistémiques : connaissances portant sur les procédures et méthodes d‘acquisition de connaissances et la preuve de leur bien-fondé à l‘aide de données, p.ex. l‘évaluation de la pertinence de résultats obtenus par des expériences scientifiques

• Processus scientifiques - expliquer des phénomènes de manière

scientifique : reconnaître, décrire et évaluer les explications d‘une série de phénomènes naturels et technologiques, tels que l‘alternance du jour et de la nuit

- concevoir et évaluer des études scientifiques : décrire et évaluer des études scientifiques et trouver des possibilités pour traiter des questions de manière scientifique, comme p.ex. l‘identification de problématiques scientifiques

- interprétation scientifique de données et de preuves : analyser et évaluer des données, affirmations et arguments dans une multitude de présentations et en tirer les conclusions scientifiques appropriées

• Situations Dans le cadre de l’étude PISA, il y a lieu d‘appliquer les connaissances et compétences acquises afin de résoudre des questions scientifiques inspirées de la réalité (p.ex. changement climatique, approvisionnement énergétique, catastrophes naturelles). L‘accent est mis avant tout sur les domaines santé et maladie, ressources naturelles, qualité de l‘environnement, risques et limites des sciences naturelles et de la technique.

9

Résolution collaborative de problèmesDans un monde de plus en plus globalisé et interconnecté, un nombre croissant de tâches est exécuté en équipe. Le travail d‘équipe et la communication sont par conséquent des compétences clés du 21ème siècle. Le succès du travail d‘équipe (p.ex. groupes d‘élèves collaborant en vue d‘un projet, familles, entreprises, organisations, orga-nismes étatiques) dépend dans une large mesure des facteurs suivants : les différents membres doivent disposer des compétences nécessaires pour une collaboration efficace au sein du groupe et être à même d‘appliquer leurs capacités de résolution de problèmes dans ces situations sociales. PISA 2015 procédera donc également à l‘évaluation des compétences de résolution de problèmes qui seront indispensables lors de projets à l‘école, au cours des études et de la formation et, ultérieurement, dans l’exercice d‘une profession. Ces compétences englobent notamment des capacités en matière de communication, de gestion des conflits, d‘organisation d‘une équipe, de formation de consensus et de suivi d‘un projet.

Le cadre d‘évaluation PISA distingue trois compétences essentielles lors de la résolution collaborative de problèmes :

- développer une compréhension commune, c.-à-d. recueillir les différentes perspectives des membres du groupe et développer une vision commune d‘un problème

- entreprendre les démarches appropriées en vue de la résolution d‘un problème, c.-à-d. reconnaître les activités susceptibles d‘aboutir à la résolution d‘un problème et prendre les mesures nécessaires

- organiser une équipe, c.-à-d. évaluer son propre rôle et celui des coéquipiers, superviser l‘organisation du groupe et l‘adapter le cas échéant, donner un feedback aux membres de l‘équipe

Les exercices sont conçus de manière à présenter un problème donné (p.ex. plani-fication d‘une fête d‘école) et à inviter l‘élève à collaborer avec un ou deux partenaires fictifs à la résolution du problème.

10

Groupe-cible: Qui participe à PISA ? Le groupe-cible pour les épreuves principales dans le cadre de l’étude PISA 2015 est défini comme suit: - tous les élèves nés entre le 1er janvier

1999 et le 31 décembre 1999 et - fréquentant les classes à partir de la 7e

Échantillon international

Afin d‘obtenir des résultats représentatifs, l‘OCDE prévoit de faire tester dans chaque pays au moins 5.400 élèves de 150 établissements scolaires. La sélection des échantillons moyen-nant tirage au sort se fait en deux étapes: Lors d‘une première étape, au moins 150 écoles représentatives des différents types d‘enseignement sont tirées au sort parmi tous les établissements d‘un pays. Ensuite, 42 élèves par établissement scolaire participant sont désignés au hasard.

Spécificité nationale

Une réglementation différente s‘applique dans un petit pays comme le Luxembourg, à l‘instar de l‘Islande et de Malte, où le nombre d‘écoles et d‘élèves requis n‘est pas atteint. Dans ces pays, tous les jeunes du groupe-cible défini et la totalité des établissements scolaires participent à l‘étude PISA.Au Grand-Duché, les épreuves principales de PISA 2015 auront lieu dans l’ensemble des 44 écoles secondaires (publiques, privées et internationales). En tout et pour tout, quelque 5.400 élèves seront testés.

Déroulement du test PISA

Fin de la session de testRécupération du matériel

Distribution du questionnaire « parents »Départ des élèves

Première partie du test cognitif (60 min)

Petite pause (env. 5 min)

Deuxième partie du test cognitif (60 min)

PISA – pause (15 min)

Remplissage du questionnaire « élèves » (env. 45 min)

Arrivée des élèves au début du coursLogin et saisie du mot de passe Introduction générale au test

ParentsQuestionnaire

« parents » (env. 35 min)

Direction de l’établissement scolaire

Questionnaire établissement(env. 60 min)

11

Réalisation : Quel est le déroulement du test PISA ?L‘étude sera réalisée dans tous les établissements scolaires du Luxembourg entre le 21 avril et le 22 mai 2015. La date exacte sera fixée par l‘école, en concertation avec le ministère de l‘Éducation nationale, de l‘Enfance et de la Jeunesse. Le test s‘étendra sur une matinée, c.-à-d. 3,5 heures. Chaque établissement a désigné un coordinateur/une coordinatrice responsable de l‘organisation du test. Le test se fera en groupes d‘environ 20 élèves. Des responsables externes seront chargés de la réalisation pratique du test et veilleront à un déroulement correct.Lors de la première partie du test, les jeunes traitent pendant deux heures des exercices relevant des sciences naturelles, des compétences en lecture, des mathématiques et de la résolution collaborative de problèmes. Différents formats d‘exercice et de réponse sont utilisés à cet égard : - questions à choix multiples - questions ouvertes : formuler sa propre

réponse - exercices interactifs : réaliser une

expérience scientifique à l‘aide d‘une simulation

- glisser - déposer : mettre des parties de réponse dans le bon ordre

- menus déroulants : sélectionner la bonne réponse

Lors de la deuxième partie du test, les jeunes répondent à un questionnaire « élève », pour lequel il faut prévoir environ 45 minutes. Ce questionnaire a trait, entre autres, à leur contexte personnel et social, à leur attitude vis-à-vis des sciences naturelles et à leur motivation, leur perception de l‘école et de l‘enseignement et leurs expériences avec les technologies de l‘information et de la communication.Les directions des différents établissements scolaires reçoivent pour leur part un questionnaire « établissement » qui s‘intéresse plus particulièrement aux caractéristiques démographiques de l‘école, à ses ressources, à la qualité de l‘environnement d‘apprentissage et à la collaboration avec les parents. En sus, les parents des élèves participants reçoivent un questionnaire « parents ». Ils sont invités à y fournir des informations relatives au parcours scolaire antérieur de leur enfant, à leurs attitudes personnelles vis-à-vis des sciences naturelles et à leur perception de l‘établissement scolaire de leur enfant.Les informations recueillies sur la base de ces questionnaires sont très utiles, dans la mesure où elles permettent de recenser des caractéristiques importantes concernant l‘élève, l‘établissement scolaire et le foyer parental, et de contribuer ainsi à une analyse plus approfondie des données.

12

Exemple d‘exercice PISA : Sciences

Réponse question 3 : Explication qui indique que les émissions volcaniques (par ex. cendres, dioxyde de soufre) réfléchissent

ou absorbent le rayonnement solaire (resp. l’empêchent d’atteindre la surface de la Terre ).

Réponse question 4 : C

Autres exemples d’exercices : http://www.men.public.lu/fr/systeme-educatif/qualite-scolaire/index.html

13

Gestion qualité Le consortium international fixe des règles strictes pour la réalisation et la surveillance de l‘étude. Ces règles portent notamment sur

- la mise au point des instruments de test - les traductions et adaptations nationales - le tirage au sort des échantillons - la réalisation du test - l‘encodage - l‘analyse des données

Les standards de qualité PISA sont documentés tant dans des manuels de procédure exhaustifs que dans des documents de planification pour la mise en œuvre. Le respect des règles est contrôlé à plusieurs reprises pour chaque pays par le consortium international. Toutes ces mesures permettent d‘assurer un niveau de qualité d’implémentation très élevé dans tous les domaines de l‘étude.

L‘analyse des données PISA se fait de manière anonyme : chaque élève se voit attribuer un code, aucun nom n‘étant saisi lors du test et du remplissage des questionnaires. Le traitement des données a lieu sur la seule base des codes, c.-à-d. que les résultats ne sont pas mis en rapport avec un nom.

Qui plus est, les résultats du test et les données personnelles recueillies dans les questionnaires ne sont pas analysées pour un ou plusieurs élèves spécifiques, mais tous les résultats sont agrégés par groupes élargis d‘élèves (p.ex. en fonction du pays, du sexe ou du type d‘école).

Protection des données

14

Mandataire et responsables de l‘étude PISAL‘étude PISA est mandatée par les gouvernements des pays participants. Chaque pays détache un membre du gouvernement auprès du PISA Governing Board (PGB), un comité commun. Sous l‘égide de l‘OCDE, cet organe est responsable de la détermination des objectifs éducatifs du programme et du respect des priorités fixées lors de la mise en œuvre du programme et prend toutes les décisions de fond.

Consortium international

Un consortium international sous la direction du Educational Testing Service (ETS), composé de plusieurs organisations internationales et instituts de recherche du secteur éducatif, a été chargé en vue d‘assurer la qualité scientifique et la mise en œuvre de l‘étude PISA. Outre l’ETS, ce consortium regroupe les partenaires suivants : ACER – Australian Council for Educational Research (Australie), cApStAn – Linguistic Quality Control (Belgique), LIST - Luxembourg Institute of Science and Technology (Luxembourg), DIPF – Deutsches Institut für Internationale Pädagogische Forschung (Allemagne), Pearson (UK), Statistics Canada (Canada) et Westat (USA).

Organisation au niveau national

Chaque pays veille à mettre en place un centre national PISA qui est en contact étroit avec le consortium international. Au Luxembourg, le rôle de centre de projet national PISA revient à l’Agence pour le développement de la qualité scolaire (ADQS), un département du Service de Coordination de la Recherche de l’Innovation pédagogiques et technologiques (SCRIPT) au sein du ministère de l‘Education nationale, de l‘Enfance et de la Jeunesse (MENJE). Le centre de projet est chargé de toutes les phases de la mise en œuvre du projet (préparation, réalisation, codage et gestion des données) et est responsable pour le respect des normes de qualité au Luxembourg. L‘évaluation des résultats nationaux PISA et la rédaction du rapport national se font en collaboration avec le Luxembourg Centre for Educational Testing (LUCET) de l’Université du Luxembourg.

Ministère de l‘Éducation nationale, de l‘Enfance et de la Jeunesse (MENJE)Service de Coordination de la Recherche et de l’Innovation pédagogiques et technologiques (SCRIPT)

Agence pour le développement de la qualité scolaire (ADQS)

Jos Bertemes (directeur du SCRIPT), Amina Kafai (chef de division ADQS)

Coordinatrice PISA : Bettina BoehmCollaboratrices: Astrid Krug, Christiane Mergen

29, rue Aldringen L-2926 Luxembourg Tél. : (+352) 247-85211

E-mail: bettina.boehm@men.luwww.oecd.org/pisa/ ou www.men.public.lu