Партизанские исследования

Когда использовать

Метод нужен на ранней стадии, когда прототип грубый и меняется каждый день. Он быстро показывает, понятна ли кнопка, находят ли нужное, как читается текст. Лучше всего работает с бумажными эскизами и простыми макетами, которые легко переделать. Его же применяют для проверки одного предположения о задаче или способа показать контент.

Метод даёт сигнал, а не доказательство. Случайные люди не обязательно ваша аудитория, поэтому результаты не имеют статистического веса. По ним решают, стоит ли двигаться дальше, а не доказывают правоту. Не берите его для узких или сложных продуктов, например медицинских или финансовых. Там нужна контролируемая обстановка и строгий метод.

Партизанское исследование не заменяет юзабилити-тестирование и интервью. Оно подготавливает их, показывая, на что стоит тратить время. Русскоязычные команды называют его коридорным тестом. Там в роли участников называют коллег из других проектов или случайных прохожих.

Что нужно для старта

• Одна цель и одно-два предположения, которые проверяете
• Прототип, который открывается сразу на телефоне или ноутбуке. Для ранних идей хватит бумаги
• Три задачи по самым частым действиям пользователя, каждая с контекстом, без подсказок в тексте
• Место, где бывают ваши пользователи, и небольшая благодарность за время. Кофе, пирожное или деньги
• Заготовленная фраза на 20–30 секунд, которой вы объясняете, кто вы и что просите
• Блокнот. Если хотите записывать видео, нужна форма согласия

Как провести

1. Цель и задачи

   Запишите, что хотите узнать. Составьте список действий, которые люди чаще всего делают в продукте, отсортируйте по частоте и оставьте три. Каждую задачу опишите как ситуацию с целью, а не как инструкцию. Не используйте в тексте слова с экрана. Проверьте сценарий на коллеге, чтобы поймать непонятные формулировки.

2. Место

   Выберите место, где бывает ваша аудитория, и не ограничивайтесь одним. Постарайтесь, чтобы участники различались по возрасту, полу и среде. Подходит ли человек, можно выяснить парой вопросов в начале разговора.

3. Приглашение

   Подойдите и скажите коротко, кто вы, что просите и сколько это займёт. Заранее придумайте, чем отблагодарите. Не держите в руках папку или камеру, лучше выглядеть как обычный человек. Спросите, есть ли у человека время и не торопится ли он.

4. Сессия

   Сессия занимает 5–15 минут. Дайте задачу и попросите говорить вслух, что человек делает и думает. Не подсказывайте и не защищайте дизайн. Если он застрял, спросите, что он ищет и чего ожидает, и только потом помогайте. Задавайте всем один и тот же набор вопросов. Хороши простые вопросы. Что вы видите? Что понимаете? Что хотели бы сделать? Записывайте, где человек замешкался, и дословные фразы.

5. Объём

   Проводите раунд из трёх–пяти человек, затем правьте и повторяйте на новых людях. Если первые трое прошли без препятствий, можно остановиться. Если трое из пяти споткнулись в одном месте, правьте и идите на следующий раунд. Всего обычно хватает пяти–пятнадцати человек.

6. Разбор

   Сразу после сессии выпишите наблюдения по участникам с датой и местом. Разложите их по темам и выделите проблемы, возможности и удачные места. Короткий список проблем отдайте команде, внесите правки и проведите следующий раунд. Видеозаписи сильнее убеждают тех, кто сомневается в выводах.

Результат

Короткий список проблем и цитаты участников. Для каждой задачи видно, кто справился, где застрял и что сказал. К списку прикладывают решение, что меняем перед следующим раундом.

Типичные ошибки

• Нет заготовленного сценария

  Без заранее написанных задач и вопросов сессии нельзя сравнивать между собой. Составьте сценарий и проверьте его до выхода.

• Наводящие вопросы

  Вопрос с готовым ответом подсказывает его. Готовьте вопросы заранее и не задавайте их в наводящей форме.

• Вопрос «что бы вы изменили»

  В ответ получаете список пожеланий. Вопрос «хотели бы вы страницу без этой функции» даёт догадки, потому что люди плохо предсказывают своё поведение. Спрашивайте, что человек видит и понимает.

• Только свои коллеги

  Коллеги ловят базовые проблемы, но не подходят для проверки с новичками и с узкими ролями.

• Запись без согласия

  Видео и звук записывают только с формой согласия, иначе делайте анонимные заметки.

• Слишком сложная задача

  Если сценарий не умещается во время сессии, проверите только часть. Берите простые задачи или режьте длинные.

• Выводы как доказательство

  Случайные участники не дают статистики. Используйте результат как повод идти дальше, а не как довод.

Российская специфика

В русскоязычных материалах метод называют коридорным тестом. Участниками называют коллег, не занятых в проекте, друзей и случайных прохожих, а также существующих пользователей и людей из соцсетей. Команда Росбанка проверяла так ранние прототипы, на подготовку уходило от 20 минут до нескольких часов. Дизайнер MyQRcards сделал три раунда подряд с тестировщиками, менеджерами внедрения и разработчиком.

Кто использует

Агентство по стандартам водителей и транспортных средств (DVSA) проверило два варианта письма автовладельцам об отзыве машины на парковке в центре Ноттингема. Заняло это чуть меньше двух часов, в видеозаписи согласились участвовать восемь человек, ещё несколько просто ответили на вопросы. Новую версию письма предпочли 75 % участников (от какого числа, в записи не сказано), а часть людей назвала её пугающей. Видео помогло убедить экспертов, которые не хотели менять работающее письмо. Рассказ автора на Inside GOV.UK.

Служба национальной статистики Великобритании (ONS) за короткий исследовательский рывок поговорила с 26 людьми в кафе и библиотеке в Кардиффе. Главным оказалось доверие и безопасность, особенно для банковских данных и адреса. Раздражали и вопросы, у которых не объяснена причина. Часть людей давала недостоверные данные. Заметка команды.