Séminaire à Marrakech Évaluation de lUniversité Cristina Robalo Cordeiro

Séminaire à MarrakechSéminaire à Marrakech

Évaluation de l’UniversitéÉvaluation de l’Université

Cristina Robalo Cordeiro

Séminaire à MarrakechSéminaire à MarrakechÉvaluation de l’UniversitéÉvaluation de l’Université


Perspectives:

• Historique

• Analytique

• Critique



Perspective Historique

• CNAVES (1993)

• ENQA (2006)

• AGENCE D’ÉVALUATION ET D’ACCRÉDITATION DE L’ENSEIGNEMENT SUPÉRIEUR (Décret-Loi n.º 369/2007)

• [Prochain ECDU – Statut de l’Enseignant Universitaire]



Perspective Analytique – UC (I)

Typologie:

• Individuelle et spontanée: à l’initiative du professeur

• Collectivement organisée (département, faculté)

• Institutionnelle (projet-pilote du rectorat – 2005)

• Organique: SGQP (2008)

Objectifs:

• Évaluer la qualité (filières, facultés)

• Modes et conditions de fonctionnement

• Modèle d’enseignement / résultats de l’apprentissage

• Performance des enseignants

• (1er cycle)



Perspective Analytique – UC (II)

(Évaluation collectivement organisée: FM / FCT)

• Méthodologie

• Traitement des résultats

• Aboutissements

• Typologie des questionnaires

Mathématique

Méthodologie• Questionnaires (anonymes) réalisés dans toutes

les unités curriculaires• en fin de semestre (enveloppe cachetée par un

étudiant et remise à la Commission Scientifique)

Traitement des résultats• Lecture et analyse des résultats faites par le

Président de la Commission Scientifique • Résultats envoyés aux professeurs• Résultats non publics • Le président de la CS envoie aux professeurs de

chaque année les moyennes des différents points sur lesquels ont été évalués les professeurs de la même année

• Requête des étudiants: résultats publics• Le comité des étudiants de maths réalise, pour son

compte, des questionnaires globaux et rend publics les résultats (sur internet et sur les murs de la fac)

Médecine

Méthodologie• Questionnaires (anonymes) réalisés dans toutes

les unités curriculaires• en début d’année scolaire, dans le cadre des cours

pratiques (70% / 90%), remis directement au professeur

Traitement des résultats• Lecture optique des résultats• Résultats envoyés aux professeurs• Résultats non publics • Résultats discutés par les représentants des

étudiants et les professeurs de la même unité curriculaire, après la réalisation d’un rapport par les étudiants commenté par les professeurs – en présence d’un “médiateur”



Perspective Analytique – UC (IV)


Mathématique

Aboutissements• Questionnaires comme instruments de gestion et

de détection de situations à corriger • Intervention (de la part du président auprès des

profs évalués négativement)

Questionnaires• E. quantitative: Cours théorique/pratique/discipline• E. qualitative

Médecine

Aboutissements• Questionnaires comme instruments de gestion et

de détection de situations à corriger • Titre attribué par les étudiants: « Le meilleur prof de

l’année »

Questionnaires• Commentés et modifiés par les étudiants, avant

leur diffusion • Aspects généraux de la discipline/prof. des cours

théoriques/prof. des cours pratiques/conditions physiques et d’encadrement curriculaire /auto-évaluation



Perspective Analytique – UC (V)




Perspective Analytique – UC (VI)

(Évaluation Institutionnelle)

Projet-pilote mené au niveau central, en 2005, d’évaluation pédagogique de 4 filières: Mathématique, Histoire, Économie, Ingénierie Informatique

Objectifs: création d’un instrument régulier d’évaluation de la qualité pédagogique / normes de correction du système

Méthodologie:

• Constitution d’un groupe de travail avec des représentants de 4 filières évaluées (membres des conseils pédagogiques, professeurs et étudiants)

• Choix des indicateurs pour l’auto-évaluation de l’ensemble de la filière (par catégories)

• Sources d’information: documents officiels, statistiques des services, questionnaires.

• Traitements des résultats (équipe d’experts)



Perspective Analytique – UC (VII)


Catégories d’indicateurs:

• Corps enseignant

• Étudiants

• École

• Performance de l’École

• Activité pédagogique

• Société



Perspective Analytique – UC (VIII)


Corps enseignant:

• Effort - heures de contact, régime de travail (exclusivité…)…

• Formation – Doctorat, formation pédagogique, années d’expérience pédagogique, expérience externe, contact entreprise…

• Activité scientifique – publications, comités scientifiques, patentes, prix…

• Aspects pédagogiques – publications, stages, actions…



Perspective Analytique – UC (IX)


Étudiants:

• Recrutement - attractivité, concurrence…

• Conditions économiques - étudiants travailleurs, boursiers, en résidence…

• Internationalisation…

• Effort - nombre d’heures de travail par unité curriculaire…

• Motivation/préparation – taux d’abandon, importance des classifications (oraux, répétitions…)…



Perspective Analytique – UC (X)


École:

• Organisation – calendrier scolaire, horaires, heures de réception, inscription dans les cours pratiques, stages, publication d’un Guide, objectifs du cycle d’études, débouchés professionnels …

• Conditions matérielles et logistiques – appui technique, équipement, laboratoires, bibliothèques…

Performance de l’École:

• Réussite/Échec scolaire…

• Satisfaction des étudiants…



Perspective Analytique – UC (XI)


Activité pédagogique:

• Organisation – objectifs d’apprentissage de l’uc, adéquation de la bibliographie, méthodes d’évaluation…

• Conditions matérielles – nombres d’étudiants par classe, équipement par étudiant…



Perspective Analytique – UC (XII)


Société

• Contact pendant la formation – activités culturelles, stages…

• Insertion professionnelle

• Acceptation – opinion des employeurs, adéquation de la formation…



Questionnaires faits auprès des étudiants

Anciens Étudiants:Objectifs:

Qualité de la formation reçue(Scientifique (3,7/5), technique (3,44/5)

culturelle 3,66/5)Temps mis pour l’obtention du 1er emploi(moins d’un an: 84%, plus d’un an: 15%)

(65,25% de réponses, par téléphone)

Nouveaux diplômésObjectifs

Qualité de la formation reçue(Scientifique, technique et culturelle)(66,4% de réponses, par téléphone)

ÉtudiantsBiliothèque - 3,97/5

Équipements et laboratoires - 3,55/5Salles de classe - 3,7/5

Appui à l’activité pédagogique – 3,53/5



Perspective Analytique – UC (XIV)

SGQP- UC• Niveaux d’analyse: enseignants, étudiants / unité curriculaire /

filière (1er ou de 2ème cycle) /unité organique / Organes de gouvernement de l’UC

• Exigences: activités à développer / Indicateurs d’accompagnement (pour chacun des niveaux d’analyse) (45 act. /43 ind. )

• Mécanismes de régulation et de stimulation (renforcement et reconnaissance / sanctions / corrections/ actions de perfectionnement)

• Responsabilité(s) de la mise en œuvre

• Contrôle du système (Création d’un Observatoire de la Qualité)



Perspective Analytique – UC (XV)

(SGQP)

Activités (contrôlées par):

Prof responsable de l’unité curriculaire (élaboration de FUC/ mise à jour de l’information sur le WOC/réflexion sur l’unité curriculaire et son perfectionnement…)

Directeur de la filière (réflexion sur le projet éducatif de la filière/ liste de filières de référence/coordination des activités pédagogiques / structure d’orientation pédagogique pour les étudiants…)

Coordinateur de la mobilité (appui aux échanges au niveau international)

Président du Conseil Pédagogique (normes générales sur le processus d’évaluation, calendrier d’examens…)

Observatoire de l’employabilité (études sur l’emploi…)

Observatoire de la Qualité (enquêtes auprès des anciens étudiants, rapport annuel, accompagnement et vérification des activités…)



Perspective Analytique – UC (XVI)

(SGQP)

Indicateurs:

• Profs: taux d’assiduité/interaction avec les étudiants/appréciation globale de la qualité du prof….

• Unité curriculaire: taux d’étudiants évalués / taux de réussite/ moyenne des classifications obtenues / pourcentages d’étudiants qui s’inscrivent plus d’une fois…

• Filière: Taux de places remplies en 1ère année / note d’entrée / pourcentages de unités curriculaires assurées par des « profs » / moyenne d’années d’obtention du diplôme / taux d’abandon…

• Unité Organique: classement (national et international) / opinion des anciens étudiants / pourcentage d’étudiants qui, après le 1er cycle, restent dans l’UC / pourcentage de profs en interaction avec la société….

• Organes de Gouvernement de la UC



Perspective Analytique – UC (XVII)

(SGQP)

Indicateurs:

Sources d’information:

• Base de données de l’UC – 36

• Base de données du Ministère - 32

• WOC – 16

• Questionnaires:

. étudiants – 40

. anciens étudiants - 12

. enseignants – 17



Perspective Critique (I)

Questions:

• Quel crédit accorder aux évaluations par les étudiants (légitimité et portée)?

• Sont-ils à même d’évaluer pour le long terme ce qui leur est proposé?

• Quelle compétence détiennent-ils pour évaluer la qualité scientifique

• Quel pourcentage dans l’évaluation générale de l’université doit revenir aux étudiants?



Perspective Critique (II)

“Supposant, devant un jury d’enfants ou d’hommes aussi déraisonnables que le sont les enfants, une compétition qui mettrait aux prises un cuisinier et un médecin, sur le point de savoir qui des deux, du médecin ou du cuisinier, a compétence quant aux aliments utiles ou nuisibles, le médecin n’aurait qu’à se laisser mourir de faim!”

Socrate, Gorgias de Platon



Perspective Critique (III)

Étudiant: juge ou témoin?

Professeur: complaisant ou sévère?

• Plaire/instruire

• Séduire/former

Documents

Séminaire à Marrakech Évaluation de lUniversité Cristina Robalo Cordeiro