Опыты на живых людях. Грабли, костыли и

заплатки

Занятие № 7

Проектирование путем ошибок

2

Увы, проще увидеть уже сделанную ошибку, чем предугадать её

Проектирование путем ошибок

3

Тестирование - мир открытий чудных

4

Что такое юзабилити-тестирование

5

ЮТ — это эксперимент, в ходе которого типичные пользователи находятся в типичном контексте, и выполняют типичные действия

За счет типичности можно работать с малыми выборками

Зачем этот эксперимент нужен?

6

Чтобы узнать:

Есть ли в интерфейсе проблемы

Насколько эти проблемы критичны

Насколько интерфейс продукта лучше или хуже, чем у конкурентов

А также чтобы получить хоть какую-то аргументацию для принятия решения о судьбе продукта

Что меряем?

7

• Успешность выполнения сценария • Количество проблем • Устойчивость проблем (~обучаемость) • Частота проблем • Критичность проблем • Субъективная оценка удовлетворенности

выполнением задания (до и после) • Иногда - время выполнения сценария

Что получаем на выходе

Перечень проблем, ранжированных по степени серьёзности

8

Отличие от маркетинга

9

Юзабилити:

изучает опыт (смог ли пользователь достичь цели)

Маркетинг:

изучает мнение (хотите ли вы купить это)

Мне это нравится (в магазине) ≠ Я смогу этим пользоваться (повседневно)

Важно!

10

Тестирование выявляет проблемы, но не генерирует готовые решения

Методики

Количественные Тренды поведения

пользователей на сайте

Сравнение продуктов по заданным критериям

Определение оптимальной структуры

11

Качественные • Выявление конкретных

интерфейсных проблем

• «Почему это происходит?»

Методики

Лабораторные или удаленные

12

Методики

Лабораторные

13

Методики

Удаленные

14

Формат ведения теста

15

Think Aloud

Sit-by или пассивное наблюдение

Retrospective Review

Можно использовать несколько форматов в одном тесте в зависимости от контекста задач

Задания пользователям

16

Формулируем от потребности, не от функционала

Отсутствие подсказок

Полнота, информативность, однозначность

Критерии успешности: объективные, субъективные

Техническое оснащение

17

Хороший модератор

18

Хорошая память

Внимательный и любознательный слушатель

Готов к неоднозначным результатам

Адекватно реагирует на внештатные ситуации

Где спрятаны грабли

19

Юзабилити-специалист может не заметить части проблем или неправильно понять сущность замеченных проблем.

Рольф Молич (Rolf Molich) регулярно проводит сравнительное тестирование самого юзабилити-тестирования (en). Результаты шокирующие. Так, во втором тесте, в котором девять групп юзабилити-специалистов самого разного уровня тестировали службу HotMail, разброс результатов был очень велик, даром, что тестовые задания были идентичны. Все группы нашли в общей сложности 310 проблем с интерфейсом. Но три четверти процентов проблем были найдены только какой-либо одной группой и не найдены остальными группами (в эти проценты входят и двадцать девять действительно серьезных проблем).

Где спрятаны грабли

20

Интерпретация результатов

Результаты тестирования

21

Перечень проблем

Метрики (для определения серьёзности проблем)

Пользователи не способны предложить решение

Список литературы

22

«Юзабилити-тестирование по дешёвке» В. Головач