• фаза доходности – пробный покупатель, подписчик, золотой подписчик;
• роль в системе – администратор, модератор, гость;
• сторона рынка (для торговых площадок типа маркетплейсов) – покупатель, продавец.
Для рекрутинга можно прибегнуть к услугам специальных агентств. Плюс этого подхода в том, что вы не будете самостоятельно искать людей и составлять для них расписание. Минус в том, что по цене и времени это может оказаться сопоставимо с реализацией тестируемой функциональности. Второй минус – так иногда попадаются профессиональные респонденты.
Самим набрать респондентов можно через рассылки для пользователей продукта, бета-тестеров или членов сообщества в социальной сети. Минус – очень много времени уходит на обработку анкет и согласование расписания между всеми участниками.
Перед началом исследования важно установить максимально доверительные отношения между респондентом и модератором. Также важно поощрять «мысли вслух», чтобы респондент переключился в режим саморефлексии (анализа собственных действий) и растормозил свою речь.
Для этого я рекомендую начать со светской беседы, разговора ни о чем, содержащего открытые вопросы. Можно угостить респондента кофе или чаем и уже затем перейти к icebreak-интервью. Можно замаскировать его под формальное интервью – сначала собирать общие анкетные данные и постепенно переходить к открытым вопросам, обращенным в прошлое. Например: «Вспомните самый первый момент, когда вам пришла мысль установить это приложение».
UX-лаборатория в «Альфа-Лаборатории» представляла собой нечто среднее между офисом и жилой квартирой. Как и положено, в ней есть полупрозрачная стена для скрытого наблюдения
UX-лаборатории, как правило, имитируют контекст квартиры, офиса или чего-то среднего, как на иллюстрации выше. К тому же часто бывает необходимо погрузить респондента в некое особое состояние. Чтобы респондента посетило больше озарений, часто требуется привести его в состояние спешки. Константин Самойлов из UX-Study, например, демонстративно засекал время после начала выполнения задания – в этом не было смысла, так как все писалось на видео, но это давало ощущение спешки. Мы для исследований предлагали пользователям представить, что они находятся в усталом ворчливом состоянии и притом очень ограничены во времени. Это помогло вскрыть гораздо больше проблем, связанных с интерфейсом, и избавиться от вежливого замалчивания, когда респонденты не рассказывают о своих затруднениях, боясь выглядеть глупыми.
Все решения обязательно фиксируются на видео. В профессиональных лабораториях ведется тройная синхронизированная запись, на которой видно лицо пользователя, состояние экрана и временна́я ось, где записываются действия пользователя – клики или нажатия клавиш. Также при тестировании десктопных интерфейсов может добавляться слой с «температурной» eyetracker-картой и показателями мозговой активности.
Очень часто исследования проходят в комнате с полупрозрачным зеркалом, хотя, на мой взгляд, без этого уже можно обойтись – экшен-камеры и аналогичные устройства позволяют транслировать видео происходящего непосредственно на рабочие места всех заинтересованных.
Все результаты заносятся в сравнительную таблицу.
Достаточно часто в процессе первых нескольких исследований дорабатывается сценарий исследования, прототип и даже сам продукт, и это желательно учитывать при рекрутинге.
Это самая важная часть исследования, так как данные в отчете, их интерпретация и оформление – основные факторы, влияющие на принятие решений.
Измененный фрагмент отчета. Показатели субъективной удовлетворенности для нескольких вариантов прототипа
Чтобы исключить личное влияние, лучше доверить оформление незаинтересованным лицам, насколько это возможно.
Следует помнить, что если респондентов мало, то, помимо результирующих оценок, необходимо обязательно принимать во внимание доверительные интервалы.
К безусловным плюсам юзабилити-исследований относится непосредственный контакт команды с реальными пользователями. Наблюдение за ними и их саморефлексия может стать источником вдохновения, а также элементом командообразования. Также прямые наблюдения позволяют выявить проблемы, которые нельзя увидеть при анализе данных с систем интерфейсной аналитики.
К минусам относится дороговизна исследований и увеличение сроков релиза.
В продуктах с быстрым циклом обновления, где улучшения появляются раз в одну или две недели, стоимость тестирования может превосходить стоимость разработки. В таком случае дешевле будет не проводить предварительные исследования, а реализовать функциональность и открыть ее для ограниченного количества пользователей с возможностью отключения в случае проблем.
При тестировании прототипов часто возникают проблемы с пониманием уровня абстракции у респондентов и с затратами на реализацию.