Как измеряются три компонента юзабилити на практике?

Вопрос

Как на практике измеряются результативность, эффективность и удовлетворённость — три компонента юзабилити по ISO 9241-11?

Ответ

Каждый компонент измеряется разными методами и разными типами показателей.


Результативность (effectiveness) — «достигнута ли цель?»

Что измеряется: выполнил ли пользователь задание полностью, частично или не выполнил.

Методы:

  • Юзабилити-тестирование — основной инструмент: участник получает конкретную задачу, исследователь фиксирует факт выполнения. Типовой показатель — процент успешного выполнения задач (task completion rate).
  • Веб-аналитика — воронки конверсии и достижение целей: процент пользователей, завершивших целевое действие (оформление заявки, подачу документов и т.п.).

Ключевое правило: фиксируется поведение (выполнил/не выполнил), а не декларация («я справился»). Вербальный комментарий — дополнение, не замена наблюдению. См. Этапы исследовательского процесса — правило «факты, не интерпретации».


Эффективность (efficiency) — «какой ценой достигнута цель?»

Что измеряется: ресурсы, потраченные на достижение результата — время, количество шагов, ошибок, обращений к помощи.

Методы:

  • Юзабилити-тестирование — фиксируются временны́е и поведенческие показатели: время выполнения задачи, число ошибочных действий, число возвратов, число обращений к подсказкам.
  • Веб-аналитика — время на странице, длина пути в воронке (количество шагов против оптимального), показатель отказов (bounce rate), точки выхода из процесса.

Важно: веб-аналитика показывает «что» (сколько кликов, сколько времени), но не «почему» — для объяснения причин низкой эффективности нужно дополнительное качественное исследование.


Удовлетворённость (satisfaction) — «каково субъективное ощущение?»

Что измеряется: отсутствие дискомфорта и положительное отношение к использованию — субъективный опыт.

Методы:

  • Опросы — стандартизированные шкалы самооценки после выполнения задачи или по итогам использования продукта. Позволяют охватить большую аудиторию и сравнивать результаты во времени или между продуктами.
  • Глубинное интервью — позволяет выявить скрытые источники дискомфорта, которые не формулируются спонтанно и не улавливаются шкальными оценками.
  • Юзабилити-тестирование (дополнительно) — короткие post-task вопросы сразу после выполнения задания; фиксируют «горячую» субъективную оценку до того, как впечатление остынет.

Ограничение: опросы фиксируют то, что люди думают о своём опыте, а не сам опыт. Расхождение между поведением (результативность, эффективность) и самооценкой (удовлетворённость) само по себе является диагностически ценным.


Сводная таблица

КомпонентТип данныхОсновные методыПримеры показателей
РезультативностьПоведенческиеЮзабилити-тестирование, веб-аналитика% выполнения задач, конверсия
ЭффективностьПоведенческие + временны́еЮзабилити-тестирование, веб-аналитикаВремя на задачу, число ошибок, длина пути
УдовлетворённостьСамоотчётныеОпросы, глубинное интервьюШкальные оценки, тематические кластеры

Пробел базы знаний

Текущие источники (Модуль 0) не охватывают конкретные измерительные инструменты для удовлетворённости — например, стандартизированные шкалы типа SUS (System Usability Scale), SUPR-Q, NPS или post-task рейтинги. Это область для следующих модулей.

Доказательная база

Вопросы для продолжения

  • Какие стандартизированные шкалы используются для измерения удовлетворённости (SUS, SUPR-Q и др.)?
  • Как интерпретировать расхождение между высокой результативностью и низкой удовлетворённостью?
  • Как адаптировать измерение компонентов для государственных сервисов с принудительным использованием?

Изменило ли это страницы в базе?

Да: в wiki/concepts/yuzabiliti.md вопрос «Как измеряются три компонента?» закрыт со ссылкой на этот запрос.