В англоязычном интернете термин Thinking Aloud применительно к тестированию сайтов существует уже почти 20 лет. В русском — пока еще даже нет его устоявшегося перевода.
Что ж, возьмем на себя роль популяризаторов методики и расскажем, как этот достаточно простой способ тестирования помогает разобраться с тем, что с вашим сайтом не так, и понять, что делать дальше.
Мышление вслух (Thinking Aloud) — это методика тестирования сайта, когда респондент выполняет поставленную задачу и при этом комментирует все свои действия вслух, объясняя, что именно и почему он делает.
Особенности мышления вслух
Когда человек одновременно выполняет задачу и комментирует свои действия — он не успевает предварительно обдумать, о чем говорит. А значит мы можем отследить практически 100% недочетов. Даже те, о которых в письменном отчете респондент бы никогда не сообщил, и те, на которые он просто не обратил внимания.
- Респондент комментирует выполнение задачи, вдруг останавливается и замолкает на секунду. Что-то ему помешало, что-то заставило остановиться и задуматься, что-то пошло не так, как нужно, — он не фиксирует момент и продолжает выполнять задачу, а мы можем сразу выделить узкое место.
- Респондент не может выполнить какое-то простое действие — но написать об этом в отчете и признаться, что не увидел какую-то кнопку, он зачастую постесняется. В ходе же нашего теста мы сразу видим, в чем заключается ошибка.
- Непрерывное комментирование в ходе выполнения задачи помогает понять, как именно мыслят реальные посетители, которые приходят на ваш сайт для решения каких-то своих задач. И часто это становится сюрпризом — пользователи думают совсем не так, как вы хотели и планировали изначально.
По сути, мышление вслух объединяет в себе возможности интервью и полноценного юзабилити-тестирования.
Офлайн или онлайн?
Мышление вслух — это исследование, которое нужно проводить именно офлайн, вживую.
- Вы точно уверены, что респондент видит ваш сайт и выполняет задание в первый раз — без предварительной подготовки.
- Вы сразу можете фиксировать основные ошибки, о которых он прямо сообщает или невербально сигнализирует.
- Вы можете наблюдать за мимикой и отслеживать реакцию человека на выполнение тех или иных действий.
В рамках онлайн-исследований с записью голоса и картинки с экрана этого добиться намного сложнее.
По своей информативности среди всех видов исследований сайта, которые можно провести онлайн, к мышлению вслух ближе всего полноценные юзабилити-тесты, которые позволяют получить тот же объем информации для анализа от респондентов, но уже в виде письменного отчета.
Невозможность отследить мимику и другие невербальные сигналы компенсируется возможностью привлекать большее количество респондентов в рамках бюджета, чем при проведении живых исследований.
Преимущества и недостатки методики
Среди плюсов методики:
- Высокое качество информации: респонденты дают реальный отчет о реальных действиях, вы можете сопоставить их слова с поведением и сделать достоверные выводы об ошибках и недочетах.
- Низкая стоимость: особенно в сравнении с другими офлайн-исследованиями вроде фокус-групп или айтрекинга. Для исследования не нужно привлекать сторонних специалистов или использовать сложное оборудование.
- Гибкость: мы можем проверять и тестировать методом мышления вслух что угодно, начиная с полноценных пользовательских сценариев и заканчивая привлекательностью и эффективностью отдельных элементов страницы или интерфейса.
- Репрезентативность: даже 5–10 респондентов дадут по итогам исследования достаточно материала для анализа, выделения и классификации ошибок и недочетов.
- Наглядность: многие недочеты и ошибки становятся видны буквально сразу, как только респондент приступает к решению задачи и начинает комментировать свои действия.
Естественно, есть и недостатки, однако на фоне преимуществ они выглядят скорее небольшими ограничениями:
- Нетипичная модель поведения для респондента: в обычной жизни мы не комментируем свои действия во время просмотра сайта, поэтому в ходе исследования респондент может испытывать дискомфорт.
- Большой объем полученной информации: одновременно нужно отслеживать действия пользователя, ассоциировать их с комментариями и попытаться выделить моменты, в которых он испытывает трудности. Исходной информации достаточно много, что усложняет обработку результатов.
- Дороже, чем проведение онлайн-тестов. Хотя стоимость исследования относительно других живых тестов невысока, по сравнению с онлайн-исследованиями цена сбора информации по-прежнему является достаточно большой.
Как провести исследование
План проведения исследования предельно прост:
- Найти респондента: желательно, чтобы он относился к вашей целевой аудитории.
- Описать задачу: «Зайдите на сайт, найдите в каталоге и купите ноутбук Apple MacBook Air 13" (MMGF2), непрерывно комментируйте свои действия по ходу», — к примеру.
- Молчать, слушать и анализировать.
- Повторить еще с 4–9 респондентами.
Можно вести запись экрана и комментариев пользователя, но нельзя помогать ему и задавать наводящие вопросы. Даже если пользователь выполняет задачу очень быстро или, наоборот, не понимает, как ее выполнить.
Кажется, что все это очень коротко и просто. Но Якоб Нильсен — автор термина и первый, кто начал говорить о методике мышления вслух — описал процесс проведения исследования еще лаконичнее.
Анализ полученных результатов
По итогам исследования у нас остается 5–10 записей, проанализировав которые, можно выделить ошибки, недочеты и пути их устранения. Выделить их можно по двум разным признакам.
- Когда пользователь говорит о проблеме, сложности или затруднении прямо: «Я не вижу форму поиска, не могу найти нужный товар, не добавляется в корзину» — вариантов масса.
- Когда респондент сигнализирует о проблеме невербально: неожиданно замолкает или задумывается — это говорит о том, что он испытывает проблемы, но по каким-то внутренним причинам не может, не хочет или не готов о них говорить. То же самое относится и к мимике, которая может часто сказать гораздо больше об ощущениях и реальных впечатлениях человека, чем слова.
Других вариантов нет. И как только вы составите список комментариев об ошибках, а также список тех моментов, на которых споткнулись пользователи — вы получите готовый чек-лист того, что нужно исправить на сайте, чтобы сделать его удобнее.
Не нужно расшифровывать записи, не нужно обсуждать их с руководством или в фокус-группах — достаточно провести простой анализ, который займет относительно немного времени, и вы получите достоверную информацию.
Общие выводы и рекомендации
- Мышление вслух — это простая и рабочая методика для исследования сайта, которая не требует специальных знаний или оборудования для проведения.
- Тестирование может проводиться в обычных офисных условиях. Вместе с обработкой результатов исследование займет не более 2–3 рабочих дней.
- Мышление вслух позволяет получить достоверную информацию про юзабилити проекта и удобство отдельных элементов интерфейса.
Часто исследования воспринимаются как что-то сложное. Мы показали, что это не так. Мышление вслух — достаточно простой тест, который тем не менее даст вам релевантную и достоверную информацию. Ваша задача — использовать ее для улучшения юзабилити проекта.