Evaluating usability

evaluatie van gebruikersinterfaces

erik duvalK.U.Leuven

http://www.cs.kuleuven.be/~erikd 1

Friday 12 February 2010

mendeley.com

Criteria voor evaluatie• downloaden .exe

• waarom? verwarrend?

• verdacht?

• wel logingeen signup

• profiel

• wanneer volledig?

• geen wizzard

• meervoudige invite

• profile update

• % pas achteraf update

• zoeken

• onder people

• library: enkel eigen of ieders

• scribd <> web voor getting started

• link > nieuw window

• email ...[at]...

•duidelijk wat je kan doen

•overzichtelijk - ‘locatie’/‘context’

• indeling: prioriteit moet eruit springen

•actie -> feedback

•hoofddoel moet makkelijk zijn

•privacy moet duidelijk zijn

•aangepast aan doelpubliek/vrienden

criteria

•Usability

•Usefulness

•Meaning

•(esthetic) Qualities

•Sociability

Criteria

•Tijd

Criteria

•Tijd •om te leren werken met toepassing

Criteria

•Tijd •om te leren werken met toepassing•om taak uit te voeren

Criteria

•Tijd •om te leren werken met toepassing•om taak uit te voeren•dat gebruikers zich herinneren hoe en wat

Criteria

•Aantal en soort fouten

Criteria

•Aantal en soort fouten•Subjectief gevoel van voldoening bij gebruikers

Criteria

•Aantal en soort fouten•Subjectief gevoel van voldoening bij gebruikers

Vaak compromis nodig, explicitering belangrijk!

Factoren die invloed uitoefenen

•plugins,scherm,...

•jargon

•frustratie, algemeen gevoel

•connectie...

•afleiding

•honger

•tijdsdruk

Factoren: Fysisch

Factoren: Fysisch•Ook zonder computers

Factoren: Fysisch•Ook zonder computers •Antropometrie

Factoren: Fysisch•Ook zonder computers •Antropometrie•Afmetingen arm, hand, vinger, hefkracht, enz.

•Aanpasbaar indien gebruikers te verschillend

•Aanpasbaar indien gebruikers te verschillend•vb. helderheid

•Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor

•Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor•Ergonomie: hoogte werkblad, beenruimte, hoek

van leuning, verlichting, enz.

•Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor•Ergonomie: hoogte werkblad, beenruimte, hoek

van leuning, verlichting, enz. •Lay-out van kantoor of leslokaal voor meer of

minder interactieFriday 12 February 2010

Factoren: Cognitief

•Probleemoplossend vermogen

Factoren: Cognitief

•Probleemoplossend vermogen•Geheugen (korte en lange termijn)

Factoren: Cognitief

•Probleemoplossend vermogen•Geheugen (korte en lange termijn)•Concentratie

Factoren: Cognitief

•Probleemoplossend vermogen•Geheugen (korte en lange termijn)•Concentratie•Beïnvloed door

vermoeidheid, verveling, stress, angst, leeftijd, ...

Factoren: Cognitief

vermoeidheid, verveling, stress, angst, leeftijd, ...•Intelligentie is meer omstreden

Factoren: Cognitief

vermoeidheid, verveling, stress, angst, leeftijd, ...•Intelligentie is meer omstreden•Kennis van het domein en computerervaring

Factoren: Persoonlijkheid

•Assertief vs. passief

•Assertief vs. passief•Angst voor/verslaving aan computers

•Assertief vs. passief•Angst voor/verslaving aan computers•Grafisch versus tekst

•Assertief vs. passief•Angst voor/verslaving aan computers•Grafisch versus tekst•Man versus vrouw ('abort')

•Assertief vs. passief•Angst voor/verslaving aan computers•Grafisch versus tekst•Man versus vrouw ('abort')•Myers-Briggs Type Indicator (skepsis alert!)

•Extrovert vs. introvert

•Extrovert vs. introvert •Denken vs. intuitie

•Extrovert vs. introvert •Denken vs. intuitie •Waarnemen vs. beoordelen

•Extrovert vs. introvert •Denken vs. intuitie •Waarnemen vs. beoordelen •Voelen vs. denken

Factoren: Cultureel

•Klassiek Chinees:van rechts naar links, kolom per kolom➪ scherm anders scannen•Belangrijker naarmate software universeler

gebruikt wordt•Aanpasbaarheid aan taal, etiquette, enz.

(ook iconen!) •Internationalisation & localisation•i18n

Trash can in Thailand

Evaluatie: planning

•Fase in ontwikkeling

Evaluatie: planning

•Ervaring met gelijkaardige projecten

Evaluatie: planning

•Verwacht aantal gebruikers

Evaluatie: planning

•Belang van toepassing

Evaluatie: planning

•Kosten en budget

Evaluatie: planning

•Kosten en budget

•Beschikbare tijd

Evaluatie: planning

•Kosten en budget

•Beschikbare tijd

•Op een bepaald moment moet natuurlijk wel opgeleverd worden!

Evaluatie-mogelijkheden

• Door experten

• Usability engineering

• Door experten

• Enquete

• Door experten

• Enquete

• Acceptatie-testen

• Door experten

• Enquete

• Acceptatie-testen

• Tijdens gebruik

Evaluatie door experten

•Expertise: HCI of domein

•Zeer effectief

•Moment in ontwikkeling: vroeg of laat

•Zeer effectief

•Delicate relatie met ontwikkelaars

•Zeer effectief

•Doel:

•Zeer effectief

•Doel:

•problemen identificeren

•Zeer effectief

•Doel:

•problemen identificeren

•veranderingen voorstellen

Evaluatie door experten (2)

•Richtlijnen: intern of extern

•‘Cognitive walkthrough'

•Typische gebruikers en taken

•Formele inspectie

•Woord en wederwoord

•‘Bird's eye view‘

•schermafdrukken op grond of muur

•Best 3 tot 5 expertenFriday 12 February 2010

Usability engineering

•Versus ‘wetenschappelijk’ experiment

•Vergelijkende test van meerdere UI's

•Benadrukt eerste gebruik

•complementair met evaluatie door experten

Usability Labhttp://www.cc.gatech.edu/gvu/images/lab/usability-lab.jpg

Usability engineering (2)

•‘Think-aloud protocol‘

•Video-opnames met annotatie

•Log, opmerkingen, enz. voor analyse

•‘Discount usability engineering’

•‘Field test':

•Realistisch (Win95: 400.000 pre-releases)

•Papieren versie

Usability Engineering

http://www.acm.org/interactions/vol2no1/feature/savage2.htmFriday 12 February 2010

Deelnemers

• Moeten representatief zijn

• Computerervaring, taal, taak, motivatie, opleiding, enz.

• Ook fysisch: geslacht, ouderdom, enz.

• Ook andere factoren: tijdstip, achtergrondgeluid, enz.

• Moeten weten dat niet zij maar de gebruikersinterface beoordeeld wordt

Dank!Friday 12 February 2010

Vragen?

Vragen?http://www.cs.kuleuven.ac.be/~erikd

Evaluating usability

Technology

Evaluating Internet Sources

Evaluating Staff Performance

Usability MobioLab

Usability 2 - Usability Heuristiken Und Usability Engineering - 2012-04-19

Questioning & Evaluating - InquietaMente 2011

The Usability Perception Scale (UPscale): A Measure for Evaluating Feedback Displays

Usability Tools

สร้างเว็บไซต์โดยใช้หลัก Usability

Usability-Testing BildungsWikiwiki.bildungsserver.de/bilder/upload/Usability-Testing_BildungsWiki.pdf · Karlsruhe, 04.02.09 | Anke Reinhold | Learntec | Usability-Testing BildungsWiki

The Usability / UX Profession Berufsfeld Usability · The Usability Professionals. Compared to others, the profession ‘Usability Profession-al’ is still a very young one. In fact,

(발제) Beyond Usability: Evaluating Emotional Response as an Integral Part of the User Experience +CHI 2009 -Anshu Agarwal /유보미 x2011 autum

Evaluating Published Research

Evaluating Social Security Systemhwong/pubfile/teaching... · 2012. 11. 6. · LECTURE 10: EVALUATING SOCIAL SECURITY SYSTEM Prof. Wong Hung . Criteria for evaluating social security

Leitfaden Usability › sites › default › files › dokumente › ... · Leitfaden Usability Gestaltungsrahmen für den Usability-Engineering-Prozess DAkkS-Prüfverfahren für

Usability testing

Information Literacy: Evaluating Sources

Evaluating EXTERIOR WAYAN .ppt

Design process evaluating interactive_designs

Evaluating New Technology

Website Usability