'

Почему достаточно 10 пользователей?

Понравилась презентация – покажи это...





Слайд 0

Почему достаточно 10 пользователей? 25 вебинар UX Russia Дмитрий Сатин, Андрей Сикорский


Слайд 1

Вопрос ответственности Достаточно – недостаточно: критерий ответственности?


Слайд 2

Знания против решения Исследование или оценка?


Слайд 3

The World Is Not Enough


Слайд 4

Задачи статистического вывода Бесконечно большие и конечные генеральные совокупности


Слайд 5

Примерные цифры Бизнес-исследование: Опросы (телефон и интернет) = ~240-~1,000 Фокус-группы = 15-20 (зависит от целей исследования и затронутых сегментов) Тестирование = 10-15 респондентов Полевые исследования = 15-40 респондентов Карточная сортировка = 15-30 (чем больше тем лучше, так как в этом исследовании применяются статистические методы, в частности кластерный анализ ) Академическое исследование: Выборки большего размера – в зависимости от объема исследования и его целей (например, 15 пользователей на сегмент или 40-100 пользователей на тест).


Слайд 6

Кого исследуем Продукт или пользователя? Пользователи отличаются по природе Продукт – по назначению


Слайд 7

Уточняем границы Мы обсуждаем Оценку Продукта Поэтому вопрос о количестве испытаний


Слайд 8

Неправильные цели Из результатов ю-т прогнозировать поведение всей генеральной совокупности невозможно


Слайд 9

Количество или качество Критериальный вопрос – количество испытаний много не нужно Исследовательский вопрос (среднее время) – важно количество испытаний


Слайд 10

Глупый вопрос Загорится ли лампочка в 501 раз, если 500 раз она уже загоралась? Ни одно новое испытание не гарантирует выполняемость последующего.


Слайд 11

Место для анекдота Раз говорим слово «качество», то уместно вспомнить вопрос: Кто устанавливает критерии качества? Когда этот вопрос был задан тестировщикам ПО, опытное большинство дало на него неправильный ответ – «мы» (то есть – тестировщики). Так кто устанавливает критерии качества?


Слайд 12

Фолкнер против Нильсена 5 Якоб Нильсен, Томас Ландауэр 1993 15 Лаури Фолкнер, 2004


Слайд 13

Убывание предельной полезности выборки Дизайн содержит конечное количество дефектов Каждый пользователь будет сталкиваться с одними и теми же проблемами Каждый пользователь будет обнаруживать всё меньше новых дефектов Но на каждого пользователя мы тратим одни и те же ресурсы


Слайд 14

CUE-4


Слайд 15

Определение количества участников Общее правило — 10 участников от группы Больше участников – больше надежность выводов Больше участников – меньше новых результатов Если нужно много участников, лучше проводит несколько раундов тестирования на маленьких группах, чем один с большой группой


Слайд 16

Критерии выбора размера группы Критичность дизайна для проекта Опыт команды тестировщиков Ожидаемых разброс реакций участников Сложность прототипа Проводится ли тестирование удаленно или в лаборатории


Слайд 17

CIF for UT reports CIF для ю-тестирования - вопрос проверки гипотез: Выработка гипотез Механизм и правила подтверждения Это не для бизнеса


Слайд 18

Сколько достаточно? Ответ может быть найден двумя путями: Статистически Критерии качества устанавливает заказчик


Слайд 19

Оценка и мониторинг Оценка была 99%- что делать с 1%? В один из моментов тестирование надо перевести в мониторинг


Слайд 20

Спасибо! вопросы?


×

HTML:





Ссылка: