Evaluating usability

evaluatie van gebruikersinterfaces

erik duvalK.U.Leuven

http://www.cs.kuleuven.be/~erikd 1

Friday 12 February 2010

http://www.cs.kuleuven.be

http://www.cs.kuleuven.be

2

http

://w

ww.

slid

esha

re.n

et/e

rik.d

uval


http://www.slideshare.net/erik.duval

http://www.slideshare.net/erik.duval

mendeley.com

3


Criteria voor evaluatie• downloaden .exe

• waarom? verwarrend?

• verdacht?

• wel logingeen signup

• profiel

• wanneer volledig?

• geen wizzard

• meervoudige invite

• profile update

• % pas achteraf update

• zoeken

• onder people

• library: enkel eigen of ieders

• scribd <> web voor getting started

• link > nieuw window

• email ...[at]...


•duidelijk wat je kan doen

•overzichtelijk - ‘locatie’/‘context’

• indeling: prioriteit moet eruit springen

•actie -> feedback

•hoofddoel moet makkelijk zijn

•privacy moet duidelijk zijn

•aangepast aan doelpubliek/vrienden


criteria

•Usability

•Usefulness

•Meaning

•(esthetic) Qualities

•Sociability


Criteria


Criteria

•Tijd


Criteria

•Tijd •om te leren werken met toepassing


Criteria

•Tijd •om te leren werken met toepassing•om taak uit te voeren


Criteria

•Tijd •om te leren werken met toepassing•om taak uit te voeren•dat gebruikers zich herinneren hoe en wat


Criteria


•Aantal en soort fouten


Criteria


•Aantal en soort fouten•Subjectief gevoel van voldoening bij gebruikers


Criteria


•Aantal en soort fouten•Subjectief gevoel van voldoening bij gebruikers

Vaak compromis nodig, explicitering belangrijk!


Factoren die invloed uitoefenen

•plugins,scherm,...

•jargon

•frustratie, algemeen gevoel

•connectie...

•afleiding

•honger

•tijdsdruk


Factoren: Fysisch


Factoren: Fysisch•Ook zonder computers


Factoren: Fysisch•Ook zonder computers •Antropometrie


Factoren: Fysisch•Ook zonder computers •Antropometrie•Afmetingen arm, hand, vinger, hefkracht, enz.



•Aanpasbaar indien gebruikers te verschillend



•Aanpasbaar indien gebruikers te verschillend•vb. helderheid




•Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor




•Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor•Ergonomie: hoogte werkblad, beenruimte, hoek

van leuning, verlichting, enz.




•Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor•Ergonomie: hoogte werkblad, beenruimte, hoek

van leuning, verlichting, enz. •Lay-out van kantoor of leslokaal voor meer of

minder interactieFriday 12 February 2010

Factoren: Cognitief


Factoren: Cognitief

•Probleemoplossend vermogen


Factoren: Cognitief

•Probleemoplossend vermogen•Geheugen (korte en lange termijn)


Factoren: Cognitief

•Probleemoplossend vermogen•Geheugen (korte en lange termijn)•Concentratie


Factoren: Cognitief

•Probleemoplossend vermogen•Geheugen (korte en lange termijn)•Concentratie•Beïnvloed door

vermoeidheid, verveling, stress, angst, leeftijd, ...


Factoren: Cognitief


vermoeidheid, verveling, stress, angst, leeftijd, ...•Intelligentie is meer omstreden


Factoren: Cognitief


vermoeidheid, verveling, stress, angst, leeftijd, ...•Intelligentie is meer omstreden•Kennis van het domein en computerervaring


Factoren: Persoonlijkheid



•Assertief vs. passief



•Assertief vs. passief•Angst voor/verslaving aan computers



•Assertief vs. passief•Angst voor/verslaving aan computers•Grafisch versus tekst



•Assertief vs. passief•Angst voor/verslaving aan computers•Grafisch versus tekst•Man versus vrouw ('abort')



•Assertief vs. passief•Angst voor/verslaving aan computers•Grafisch versus tekst•Man versus vrouw ('abort')•Myers-Briggs Type Indicator (skepsis alert!)




•Extrovert vs. introvert




•Extrovert vs. introvert •Denken vs. intuitie




•Extrovert vs. introvert •Denken vs. intuitie •Waarnemen vs. beoordelen




•Extrovert vs. introvert •Denken vs. intuitie •Waarnemen vs. beoordelen •Voelen vs. denken


Factoren: Cultureel

•Klassiek Chinees:van rechts naar links, kolom per kolom➪ scherm anders scannen•Belangrijker naarmate software universeler

gebruikt wordt•Aanpasbaarheid aan taal, etiquette, enz.

(ook iconen!) •Internationalisation & localisation•i18n


Trash can in Thailand


Trash can in Thailand


Evaluatie: planning


Evaluatie: planning

•Fase in ontwikkeling


Evaluatie: planning


•Ervaring met gelijkaardige projecten


Evaluatie: planning



•Verwacht aantal gebruikers


Evaluatie: planning




•Belang van toepassing


Evaluatie: planning





•Kosten en budget


Evaluatie: planning





•Kosten en budget

•Beschikbare tijd


Evaluatie: planning





•Kosten en budget

•Beschikbare tijd

•Op een bepaald moment moet natuurlijk wel opgeleverd worden!


Evaluatie-mogelijkheden



• Door experten



• Door experten

• Usability engineering



• Door experten


• Enquete



• Door experten


• Enquete

• Acceptatie-testen



• Door experten


• Enquete

• Acceptatie-testen

• Tijdens gebruik


Evaluatie door experten



•Expertise: HCI of domein




•Zeer effectief




•Zeer effectief

•Moment in ontwikkeling: vroeg of laat




•Zeer effectief


•Delicate relatie met ontwikkelaars




•Zeer effectief



•Doel:




•Zeer effectief



•Doel:

•problemen identificeren




•Zeer effectief



•Doel:

•problemen identificeren

•veranderingen voorstellen


Evaluatie door experten (2)

•Richtlijnen: intern of extern

•‘Cognitive walkthrough'

•Typische gebruikers en taken

•Formele inspectie

•Woord en wederwoord

•‘Bird's eye view‘

•schermafdrukken op grond of muur

•Best 3 tot 5 expertenFriday 12 February 2010

Usability engineering

•Versus ‘wetenschappelijk’ experiment

•Vergelijkende test van meerdere UI's

•Benadrukt eerste gebruik

•complementair met evaluatie door experten


Usability Labhttp://www.cc.gatech.edu/gvu/images/lab/usability-lab.jpg


http://www.cc.gatech.edu/gvu/images/lab/usability-lab.jpg

http://www.cc.gatech.edu/gvu/images/lab/usability-lab.jpg

Usability engineering (2)

•‘Think-aloud protocol‘

•Video-opnames met annotatie

•Log, opmerkingen, enz. voor analyse

•‘Discount usability engineering’

•‘Field test':

•Realistisch (Win95: 400.000 pre-releases)

•Papieren versie


Usability Engineering

voor

Na

http://www.acm.org/interactions/vol2no1/feature/savage2.htmFriday 12 February 2010

http://www.acm.org/interactions/vol2no1/feature/savage2.htm

http://www.acm.org/interactions/vol2no1/feature/savage2.htm

Deelnemers

• Moeten representatief zijn

• Computerervaring, taal, taak, motivatie, opleiding, enz.

• Ook fysisch: geslacht, ouderdom, enz.

• Ook andere factoren: tijdstip, achtergrondgeluid, enz.

• Moeten weten dat niet zij maar de gebruikersinterface beoordeeld wordt



Dank!Friday 12 February 2010

Dank!

Vragen?


Dank!

Vragen?http://www.cs.kuleuven.ac.be/~erikd


http://www.cs.kuleuven.ac.be/~erikd

http://www.cs.kuleuven.ac.be/~erikd

Technology

Evaluating usability