26
Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия пользователя с человеко-машинным интерфейсом Балканский А.А., Лавров А.В., Смолин А.А., Солоницын Ю.А. Университет ИТМО, кафедра Графических технологий Дизайн человеко-компьютерных систем

Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Embed Size (px)

Citation preview

Page 1: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Исследование воздействиякогнитивной и информационной нагрузкина эффективность взаимодействия пользователя с человеко-машинным интерфейсом

Балканский А.А., Лавров А.В., Смолин А.А., Солоницын Ю.А.

Университет ИТМО, кафедра Графических технологий

Дизайн человеко-компьютерных систем

Page 2: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Авторы

• Научный руководитель — Смолин А.А., к.ф.н.

• Реализация эксперимента — Солоницын Ю.А.

• Научный консультант — Балканский А.А.

• Консультант по математической обработке данных — Лавров А.В.

Page 3: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Исследуемая проблема

• В настоящее время при оформлении интерфейсов все шире используется «Плоский стиль» («Flat UI»);

• В то же время, ряд экспертов ИТ-индустрии (в частности, Якоб Нильсен) заявляют о том, что использование этого стиля ведет к снижению эффективности взаимодействия [1, 2];

• В сферах промышленности, транспорта, финансовых системах снижение эффективности взаимодействия ведет к снижению безопасности труда, росту риска техногенных аварий и финансовых потерь [3, 4].

Page 4: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Примеры

Фрагмент интерфейса, оформленного в «классическом» стиле.

(“Heroes of Might and Magic III – HD Edition”, 3DO/UbiSoft, 1999)

Фрагмент интерфейса, «Flat UI».

(Windows Phone Maps, HERE/Microsoft corp., 2016)

Page 5: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Примеры

Piotr Kubicki, Szczecin Airport | redesign concept,

https://www.behance.net/gallery/37478667/Szczecin

-Airport-redesign-concept

David Perger, FADE APP UI KIT | FREEBIE,

https://www.behance.net/gallery/36367535/FAD

E-APP-UI-KIT-FREEBIE-

Roma Smirnov, Yandex.Electrichki

https://www.behance.net/gallery/36

466693/jandekselektrichki

Page 6: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Практическая значимость

• Эффективность* работы с интерфейсом прямо связана со временем решения задачи и числом совершаемых ошибок;

• В коммерческих системах — эффективность интерфейса прямо связана с доходом компании;

• В промышленных системах — эффективность интерфейса прямо связана с безопасностью и производительностью труда.

* — Эффективность — связь между достигнутым результатом и использованными ресурсами (ГОСТ Р ИСО 9241-210 — 2012).

Page 7: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Пример (один из многих)

Берлин, аэропорт Шенефельд, станция наземного метро (S-Bahn).Время ожидания в очереди: около 20 минут.

Пользователь нажимает на все видимые элементы в попытке определить алгоритм взаимодействия с терминалом.

Page 8: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Термины и определения

• Когнитивная нагрузка— явление, приводящее к росту объема умственных усилий, затрачиваемых пользователем навзаимодействие с интерфейсом [3];

• Информационная нагрузка — объем данных или число факторов, которые пользователь должен обработать для решения задачи [1, 2, 3, 4].

Page 9: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Аналогичные исследования

Группа Бурмистрова [5]: Группа Фабио [6]:

Сравнение эффективности интерфейсов, выполненных в «классическом» и «плоском» стилях.

Изучение когнитивной нагрузки.

Page 10: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Тестовые материалы• Набор web-страниц, последовательно

предъявляемых респонденту;

• 9 заданий;

• Демографические данные.

Page 11: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Проведение эксперимента

0

50

100

150

200

250

0

20

40

60

80

100

120

140

160

180

200

12-14 15-18 18-25 25-35 35-45 45-65 More than65

Всего респондентов: 571;

Полных записей: 356.

Эксперимент: 20 мая — 19 июня 2016.

Page 12: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Задачи математической обработки

• Проверка статистической значимости воздействия факторов, изменяемых в ходе эксперимента;

• Проверка статистической значимости обнаруженных в ходе эксперимента изменений параметров.

Page 13: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Алгоритм обработки данных

1. Предварительная фильтрация данных;

2. Выравнивание выборок — случайное прореживание;

3. Проверка значимости воздействия экспериментальных факторов — попарное сравнение случайно перераспределенных выборок (метод χ2);

4. Проверка значимости изменения параметров — попарное сравнение исходных выборок (метод χ2, критерий Стьюдента с предварительным приведением данных к нормальному виду).

Page 14: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Программное обеспечение

Page 15: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Результаты (задание 2)

Среднее число ошибок, %:

Среднеевремя, с:

Стиль:

P(t): • 1–2: > 5%• 2–3: > 5%• 1–3: > 5%

1 2 3

0

1000

2000

3000

4000

5000

Стиль 1 Стиль 2 Стиль 3

0

0.005

0.01

0.015

0.02

Стиль 1 Стиль 2 Стиль 3

Page 16: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Результаты (задание 3)

Среднее число ошибок, %:

Среднеевремя, с:

Стиль:

P(t): • 1–2: > 5%• 2–3: < 1%• 1–3: < 1%

1 2 3

0

1000

2000

3000

4000

5000

6000

7000

Стиль 1 Стиль 2 Стиль 3

0.00%

5.00%

10.00%

15.00%

20.00%

25.00%

30.00%

35.00%

40.00%

Стиль 1 Стиль 2 Стиль 3

Page 17: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Результаты (задание 4)

Среднее число ошибок, %:

Среднеевремя, с:

Стиль:

P(t): • 1–2: > 5%• 2–3: < 1%• 1–3: < 1%

1 2 3

0

1000

2000

3000

4000

5000

6000

Стиль 1 Стиль 2 Стиль 3

0.00%

2.00%

4.00%

6.00%

8.00%

10.00%

12.00%

14.00%

16.00%

Стиль 1 Стиль 2 Стиль 3

Page 18: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Результаты (задание 5)

Среднее число ошибок, %:

Среднеевремя, с:

Стиль:

P(t): • 1–2: > 5%• 2–3: < 1%• 1–3: < 1%

1 2 3

0

1000

2000

3000

4000

5000

Стиль 1 Стиль 2 Стиль 3

0.00%

2.00%

4.00%

6.00%

8.00%

10.00%

12.00%

14.00%

16.00%

18.00%

Стиль 1 Стиль 2 Стиль 3

Page 19: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Результаты (задания 6–8)

Среднее число ошибок, %:

Среднеевремя, с:

Матрица:

P(t): • 3x3–5x5: < 1%• 5x5–7x7 : < 1%• 3x3–7x7 : < 1%

3x3 5x5 7x7

0

1000

2000

3000

4000

5000

6000

7000

3x3 5x5 7x7

0.00%

1.00%

2.00%

3.00%

4.00%

5.00%

6.00%

7.00%

3x3 5x5 7x7

Page 20: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Возможное проявление закона Хика

Задания 6–8:

Page 21: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Результаты (задание 9)Среднеевремя, с:

Стиль:

P(t): • 1–2: < 1%• 2–3: < 1%• 1–3: < 1%

1 2 3

0

1000

2000

3000

4000

5000

6000

7000

8000

9000

Стиль 1 Стиль 2 Стиль 3

0.00%

50.00%

100.00%

150.00%

200.00%

250.00%

300.00%

Стиль 1 Стиль 2 Стиль 3

Page 22: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Результаты (задания 5 и 9)

P(t): • 5(1)–9(1): < 1%• 5(2)–9(2): < 1%• 5(3)–9(3): < 1%

Page 23: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Карты нажатий

Page 24: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Проявление закона Фиттса

Page 25: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Источники1. J. Nielsen. Windows 8 – Disappointing Usability for Both Novice

and Power Users. Nielsen Norman Group. Published on:

19 November 2012. Accessed on: 05 December 2015. Web:

http://www.nngroup.com/articles/windows-8-disappointing-

usability/.

2. K. Whitenton. Minimize Cognitive Load to Maximize Usability.

Nielsen Norman Group. Published on: 22 December 2013.

Accessed on: 17 November 2015. Web:

http://www.nngroup.com/articles/minimize-cognitive-load/.

3. K. Holden, N. Ezer, G. Vos. Risk of Inadequate Human-Computer

Interaction. NASA Johnson Space Center. Published on:

26 December 2013. Accessed on: 16 November 2015.Web:

https://humanresearchwiki.jsc.nasa.gov/index.php?title=Risk_of_In

adequate_Human-Computer_Interaction.

4. The human-machine interface as an emerging risk. European

Agency for Safety and Health at Work. Published in ~2006.

Accessed on: 16 November 2015. Web:

https://osha.europa.eu/en/tools-and-

publications/publications/literature_reviews/HMI_emerging_risk.

5. I. Burmistrov, T. Zlokazova, A. Izmalkova, A. Leonova

(Laboratory of Work Psychology, Lomonosov Moscow State

University, Moscow, Russia; InterUX Usability Engineering

Studio, Tallinn, Estonia). “Flat Design vs Traditional Design.

Comparative Experimental Study”, IFIP International Federation

for Information Processing 2015; J. Abascal et al. (Eds.):

INTERACT 2015, Part II, LNCS 9297, pp. 106-114, 2015.

6. A. Errante, R. A. Fabio, C. Incorpora, N. Mohammadhasni,

T. Caprì, C. Carrozza, A. Falzone. :The Influence of Cognitive

Load and Amount of Stimuli on Entropy through Eye tracking

measures”, EuroAsian Joint Conference on Cognitive Science.

September 25-27, 2015. Torino, Italy.

Page 26: Исследование воздействия когнитивной и информационной нагрузки на эффективность взаимодействия

Спасибо за внимание!