Aucun titre de diapositive

Cours Ergonomie des Interactions Personne-Machine20 novembre 2013Les diffrentes mthodologies dvaluation en IPMMireille Btrancourt - TECFA - FPSE

TECFATechnologies pour la Formation et lApprentissage

1Lobjectif de ce cours est de prsenter les trois types dapproches mthodologique de lvaluation des IPM

Plan de la sancePrsentation des groupes 28, 29, 30Rappel et prcision sur lanalyse de lactivitPrsentation des diffrentes mthodes de test de lutilisabilitLa mthode du test utilisateur : prsentation et exerciceConduite de lentretien : voir ppt complmentaire : http://tecfa.unige.ch/tecfa/teaching/LMRI41/1314/ergo8_entretien.pptxMthodes danalyse de lactivitBut : mieux connatre lactivit de lutilisatrice-teur ses intentions, les lments importants,des exemples de tches sur lesquels btir vos scnarios (prcisment, ce que la personne voulait faire, pourquoi, avec qui, etc.)

Mthode : Ralisez un entretien avec un utilisateur de votre site et dun public cible selon la mthode Story Telling avec relances Pourquoi-comment(Racontez-moi la dernire fois que.... Et les autres fois...)

Dtails sur la mthode ici :http://tecfa.unige.ch/tecfa/teaching/LMRI41/projet_phase2.htmlObjectif ultime : construire un scnario comportant des tches authentiques pour le test utilisateurs 3Comment valuer lergonomie dun systme ?

4Imaginez que lon vous demande didentifier les problmes dutilisabilit que pose le distributeur de ticket des TPG. Quelles mthodes proposeriez-vous dutiliser ?Mthodes pour valuer lergonomieInspection experteObservation in situquestionnaireTest utilisateurs5-10 participantsSans participantDonnes subjectivesDonnes comportementalesGrand nombre de participantsAnalyses quantitativesAnalyses qualitativesCoteux en tempsPeu coteux en tempsEntretiensFocus groupesGrilles normativesMthodes pour valuer lergonomie dun systmeInspection experteObservation in situquestionnaireTest utilisateursFacilit dapprentissageEfficiencePrvention des erreursSatisfactionUtilisabilitUtilitAcceptabilitValeurs dusageIntgration pratiqueAtteinte des objectifs utilisateursSupport lactivit EntretienFocus groupesApproches par test utilisateursVrifier que le systme soit utilisable pour les utilisateurs (novices du systme ou de cette version)Evalue la prise en main (et pas lutilisation rgulire)Objectif :Caractristique :Doit tre faite par des vrais utilisateurs partir de scnarios dusage rels7Approche par test utilisateursVerbalisation provoque simultaneAuto-confrontation a posterioriObservationApproche cliniqueTest de reconnaissanceParcours oculomoteurPerformances (temps dexcution, nombre de clics Approcheexprimentale8Exemple de test utilisateur avec approche exprimentale

Comparaison de deux interfaces de prescriptionWipfli, R. (2012). Decision making in dynamic work situations: Building a framework for medical alerts in computerized drug prescription. Thse de lUniversit de Genve.Version classique

Mthode : Version adapte

Parcours oculomoteurFilms (cl_example.avi, ad_example.avi)Le test utilisateur : construction et passation1. Prparer ltude (phase 1 3 du projet) 2. Recruter les participants3. Tester3.1. Prsenter la situation3.2. Conduire lentretien4. Produire conclusionsLes tapes suivre 14Etapes de prparation du testQue propose le site ?Comment le site est-il construit ?(contenu, organisation fonctionnalits, outils daide)Analyse du Contexte global1 entretienAnalyse de lactivitQuest-ce que font les utilisateurs habituellement sur ce site ?Analyse du siteQuelles tches donner pour le test utilisateurs ?

Construction du scnario de test daprs analyse de lactivit et analyse du siteQuels sont les problmes rencontrs par les utilisateurs ?

Conduite du testDiagnosticProposition de remdiationsConstruction du scnario (1/2)Voir sur page Description du projet -> conseils pour llaboration du scnariohttp://tecfa.unige.ch/tecfa/teaching/LMRI41/projet_phase2.htmlLe scnario pour le test : Prvoit plusieurs tches formules de faon authentique (termes et buts de lutilisateurs interview dans lanalyse de lactivit) Mets lutilisatrice-teur dans une situation simule, type jeu de rle Donne des tches assez ouvertes, qui peuvent sexcuter de diffrentes faons Mais qui demande une rponse prcise Dont la rponse peut tre trouve sur le site !16Construction du scnario (2)Que pourrait-on reprocher aux tches proposes ci-dessousSur un site de mobilierTrouve le canap de modle schlubuck, en combien de couleurs existe-t-il ?

Sur un site de rservation de voyage Rserve une chambre dans un htel Cran-Montana du 1er au 6 mars. Sur un site de transports publicsPeut-on imprimer litinraire entre larrt Gare Cornavin et larrt Unimail ?

17Reprsentatifs du public-cible (ou un seul des publics cible)

Nutilisant pas le site Web que vous testez

5 personnes permettent didentifier un grand nombre de problmesExprience dinternet : usagers rguliers

2. Recruter les participants18Reprsentatifs du public-cible (si possible)Prendre les vrais utilisateurs, pas leurs reprsentantsProblmes de recrutementProblmes de confidentialitVarier les autres variables:Exprience dans le domaine concernExprience avec linformatique, avec Internet, Age, sexe, culture, position gographiqueFonction dans lentrepriseCombien de sujets?Dpend de lhomognit de la population3-5: dtection des gros problmes5-10: conclusions plus dfendables>10: validationContact par insider qui explique les enjeux

Mettre la personne sur la page daccueil du siteLe but nest pas de vous valuer, mais dvaluer la qualit du site. Ce test va durer environ 20 minutes.Il ny a pas de bonne ou mauvaise rponse.Puis-je vous enregistrer...Voici la premire tche (imprimez-l et laissez-l lutil)PENSEZ TOUT HAUTPENSEZ TOUT HAUTPENSEZ TOUT HAUTPENSEZ TOUT HAUT hmm quest-ce que vous tes en train de faire ?PENSEZ TOUT HAUTPENSEZ TOUT HAUTPENSEZ TOUT HAUTPENSEZ TOUT HAUT

3. Tester 3.1. Expliquer19Rgles classiques de lentretien :Ecouter > ParlerPoser des questions sur son activit Poser des questions neutresFournir un feedback neutre Respecter les silences, laisser un petit moment aprs chaque tcheRebondir sur les points intressants, ne pas suivre rigidement un canevasTraiter lutilisateur comme un expert dans son mtier, pas comme un cobaye (voir film test-utilisateur humour)Ne pas se laisser placer dans un rle dexpert par lutilisateurArrter le test en cas dchec rptitifPrvoir un entretien post-test

3. Tester 3.2. Ecouter20Rgles de lentretien :Ecouter > ParlerPoser des questions prcises Poser des questions neutresFournir un feedback neutre Respecter les silences, laisser une chance de rpondre aux questions non poses, laisser un petit moment aprs chaque tcheRebondir sur les points intressants, ne pas suivre rigidement un canevasConsidrer lutilisateur comme un expert dans son mtier, pas comme un cobaye, lutilisateur doit le sentir.Ne pas se laisser placer dans un rle dexpert par lutilisateur, cd ne pas suggrer de solutions. Facile dire mais pas facile faire dans la situation. Sen rfrer au point prcdentPrvoir un entretien post-test : on obtient souvent des opinions, et des rationalisations de comportements, mais cela vous renseigne sur lattitude des utilisateurs, et galement cela permet aux sujets de verbaliser leur ventuelle insatisfaction.

Arrter le test en cas dchec rptitif. Normalement, le scnario doit prvoir dabord des tches faciles et peu coteuses en temps, qui font aussi un bon test pour savoir si lon doit poursuivre. En cas dchec, avant de virer le logiciel, sassurer quun utilisateur de mme profil aura les mmes difficults.

Quavez-vous pens du site Web ?Faire passer un questionnaire comme la SUS (system Usability Scale).Jaimerais utiliser ce site frquemmentJe trouve ce site inutilement complexeJe pense que ce site est facile utiliserJaurais besoin dun support technique pour pouvoir utiliser ce siteLes diffrentes fonctionnalits de ce site sont bien intgresCe site est truff dincohrencesLe grand public peut apprendre utiliser ce site trs rapidementCe site est lourd utiliserJai confiance en ce siteJe dois apprendre beaucoup avant de pouvoir utiliser ce site efficacementRemercier le participant

3. Tester 3.3. Post-test21Rgles de lentretien :Ecouter > ParlerPoser des questions prcises Poser des questions neutresFournir un feedback neutre Respecter les silences, laisser une chance de rpondre aux questions non poses, laisser un petit moment aprs chaque tcheRebondir sur les points intressants, ne pas suivre rigidement un canevasConsidrer lutilisateur comme un expert dans son mtier, pas comme un cobaye, lutilisateur doit le sentir.Ne pas se laisser placer dans un rle dexpert par lutilisateur, cd ne pas suggrer de solutions. Facile dire mais pas facile faire dans la situation. Sen rfrer au point prcdentPrvoir un entretien post-test : on obtient souvent des opinions, et des rationalisations de comportements, mais cela vous renseigne sur lattitude des utilisateurs, et galement cela permet aux sujets de verbaliser leur ventuelle insatisfaction.

Arrter le test en cas dchec rptitif. Normalement, le scnario doit prvoir dabord des tches faciles et peu coteuses en temps, qui font aussi un bon test pour savoir si lon doit poursuivre. En cas dchec, avant de virer le logiciel, sassurer quun utilisateur de mme profil aura les mmes difficults.

Les tapes du test utilisateurVoir lexemple du test de fruits (humoristique)http://www.youtube.com/watch?v=3Qg80qTfzgUNotez les diffrentes tapes de la passationMaintenant vous de jouerVoir lexercice de test utilisateur :http://tecfa.unige.ch/tecfa/teaching/LMRI41/projet_phase4.htmlAnalyse de lactivitTest utilisateurs Analyse du systmeContenu, organisation, fonctionnalits, outils daidePb dutilisabilit suppossScnario dutilisationContexte global dutilisationUn ou plusieurs exemplesde tches authentiquesPb dutilisabilit observs :Diagnostic, propositions de remdiation1 entretien5 utilisateurs / -trices dun mme public cible

Vous tes iciAttention, nous envoyer votre scnario pour avis !24Relations entre vos analyses (en bleu) et le rsultat de ces analyses (en jaune).Mthodes pour valuer lergonomieInspection experteObservation in situquestionnaireTest utilisateurs5-10 participantsSans participantDonnes subjectivesDonnes comportementalesGrand nombre de participantsAnalyses quantitativesAnalyses qualitativesCoteux en tempsPeu coteux en tempsEntretiensFocus groupesGrilles normatives