Почему достаточно 10 пользователей? 25 вебинар UX Russia Дмитрий Сатин, Андрей Сикорский

Вопрос ответственности

Достаточно – недостаточно: критерий ответственности?

Знания против решения

Исследование или оценка?

The World Is Not Enough

Задачи статистического вывода

Бесконечно большие и конечные генеральные совокупности

Примерные цифры

Бизнес-исследование:
Опросы (телефон и интернет) = ~240-~1,000
Фокус-группы = 15-20 (зависит от целей исследования

Кого исследуем

Продукт или пользователя?
Пользователи отличаются по природе
Продукт – по назначению

Уточняем границы

Мы обсуждаем
Оценку
Продукта
Поэтому вопрос о количестве испытаний

Неправильные цели

Из результатов ю-т прогнозировать поведение всей генеральной совокупности невозможно

Количество или качество

Критериальный вопрос – количество испытаний много не нужно
Исследовательский вопрос

Глупый вопрос

Загорится ли лампочка в 501 раз, если 500 раз она

Место для анекдота

Раз говорим слово «качество», то уместно вспомнить вопрос:
Кто устанавливает

Фолкнер против Нильсена

5
Якоб Нильсен, Томас Ландауэр 1993
15
Лаури Фолкнер, 2004

Убывание предельной полезности выборки

Дизайн содержит конечное количество дефектов
Каждый пользователь будет сталкиваться

CUE-4

Определение количества участников

Общее правило — 10 участников от группы
Больше участников –

Критерии выбора размера группы

Критичность дизайна для проекта
Опыт команды тестировщиков
Ожидаемых разброс реакций

CIF for UT reports

CIF для ю-тестирования - вопрос проверки гипотез:
Выработка гипотез
Механизм

Сколько достаточно?

Ответ может быть найден двумя путями:
Статистически
Критерии качества устанавливает заказчик

Оценка и мониторинг

Оценка была 99%- что делать с 1%?
В один из