Как составлять анкеты для немодерируемых UX-тестов: пошаговое руководство
Привет, Хабр! Эта статья-навигация по немодерируемым UX тестам для команд от Ozon FinTech. Мы с вами разберем, какие задачи помогают решить немодерируемые UX тесты, как формулировать вопросы в зависимости от целей и как проводить тесты качественно, быстро и просто.
Основные типы задач для немодерируемых UX-тестов которые рассмотрим:
Тестирование навигации и поиска информации в интерфейсе
Тестирование юзабилити ключевых функций
Сравнительное тестирование интерфейсов
Тестирование процессов в интерфейсах
Тестирование понимания текстов в интерфейсе
Когда не стоит проводить немодерируемые UX тесты
Чек-лист: о чем еще подумать перед запуском немодерируемого UX теста?
Меня зовут Маша Павленко, мы с командой занимаемся всем что связано с исследованиями интерфейсов в Ozon FinTech. Я задумала эту статью чтобы помочь дизайнерам, продакт-менеджерам, разработчикам и другим специалистам научиться тестировать интерфейсы.
Этот статья отчасти продолжение моего выступления на Research Expo 2024, где я рассказывала о наших подходах к процессу немодерируемых UX тестова в Ozon Fintech. Cтатья подойдёт тем, кто хочет здесь и сейчас понять как протестировать интерфейс и получить результаты проверки своих гипотез.
Для начала: вводные о немодерируемых UX исследованиях
В интернете можно найти огромное количество описаний того, для чего нужны немодерируемые UX тестирования, какие их виды существуют, как провести тест и собрать анкету, и многое другое. Все многочисленные ресурсы говорят о немодерируемых UX тестах как о едином подходе, хотя на самом деле немодерируемый UX тест представляет собой анкету с миксом разных видов тестов. Получается так, что эта “серебряная пуля” — UX тест — собирается как конструктор с набором различных вопросов.
Важно понимать, что конкретно мы можем добавить в тест и какие виды вопросов существуют. Но помимо знания о том, какие виды вопросов есть, нам необходимо понять, какая задача перед нами стоит.
В команде исследований Ozon FinTech у нас есть шаблон сбора немодерируемого UX теста. Он состоит из
Описания задачи + подхода к решению задачи
Анкета для немодерируемого UX теста
Результаты исследования
Двух одинаковых анкеты как и двух идентичных задач не бывает. Каждая анкета для теста уникальна так как включает в себя вопросы которые помогают проверить гипотезы конкретно этой задачи. Но любая анкета включает в себя
Приветствие: вводная информация для пользователей о том, кто мы такие, что перед ними, сколько времени займет прохождение теста и предупреждение о том, что все ответы конфиденциальны.
Скринирующие вопросы: вопросы-фильтры, позволяющие понять, что мы получим ответы именно от той аудитории, на которую рассчитан данный тест.
Инструкции к выполнению заданий: контекст, который представляем пользователям, чтобы объяснить, о чем будет речь и какие будут последующие вопросы.
Основной блок вопросов: касающийся поставленной перед нами задачи.
Заключительные вопросы: уточняющие вопросы о портрете пользователей, прошедших анкету.
А теперь перейдем к самому интересному — как подружить нашу задачу с видами тестов и выбрать наиболее подходящие вопросы, которые помогут проверить наши гипотезы.
Тестирование навигации и поиска информации в интерфейсе
Тестирование навигации и поиска информации направлено на оценку удобства и логичности навигационных элементов интерфейса. Основная задача — выяснить, насколько легко пользователям находить нужную информацию и выполнять задачи. Это позволяет выявить слабые места в структуре интерфейса и понять, как улучшить пользовательский опыт.
Структура анкеты для UX теста навигации и поиска информации в интерфейсе состоит из нескольких ключевых разделов. Сначала идет введение и общие вопросы, чтобы получить общее представление о восприятии интерфейса. Затем мы оцениваем легкость навигации, чтобы понять, насколько просто пользователям перемещаться между разделами. Далее следует оценка поиска конкретной информации, позволяющая определить эффективность нахождения необходимых материалов. Важно также оценить интуитивность и логику структуры интерфейса, выясняя, соответствуют ли они ожиданиям пользователей. Завершает тестирование оценка удовлетворенности навигацией и поиском, а также раздел для заключительных комментариев, где пользователи могут оставить свои предложения и замечания.
Примеры вопросов в анкете UX теста навигации и поиска информации в интерфейсе:
Перед вами [вставить нужное]. Какое первое впечатление у вас сложилось от [вставить нужное]? Ответы: Очень положительное, Положительное, Нейтральное, Отрицательное, Затрудняюсь ответить;
Шкала: Насколько понятной показалась вам структура интерфейса на первый взгляд? Оцените по шкале от 1 до 5, где 1 — совсем непонятно, а 5 — полностью понятно.
First click: Вы в [вставить нужное]. Найдите область, которая на ваш взгляд, позволит [вставить нужное].
Инструкции:
- Пожалуйста, внимательно посмотрите на экран;
- Нажмите на элемент, который, по вашему мнению, поможет вам выполнить задачу;
- Не думайте слишком долго о своем ответе. Просто нажмите на область, которая приходит вам в голову.Шкала: Оцените, насколько легко было найти нужную информацию по шкале от 1 до 5, где 1- очень трудно, а 5 — очень легко.
Шкала: Кажутся ли вам переходы между страницами и разделами логичными? Оцените по шкале от 1 до 5, где 1 — совсем нелогично, а 5 — очень логично.
Открытый вопрос: Какую информацию или функцию, по вашему мнению, стоило бы расположить более заметно?
Насколько вам нравится навигация и удобство поиска информации? Оцените по шкале от 1 до 5, где 1 — совсем не нравится, а 5 — очень нравится.
Есть ли что-то, что вас особенно разочаровало или удивило в процессе использования интерфейса?
Тестирование юзабилити ключевых функций
При тестировании ключевых функций тестируются конкретные функции продукта, например, добавление товара в корзину, оформление заказа или загрузка документов. Такие задачи помогают выявить проблемы, которые могут затруднять завершение действий в иинтерфейсе.
Структура анкеты для UX теста юзабилити ключевых функций в интерфейсе начинается с введения, где участникам объясняются цели теста и предоставляются инструкции по его прохождению. Затем следует этап выполнения задач, который позволяет оценить скорость и эффективность выполнения пользователями заданий. Далее идет оценка удобства использования, чтобы измерить комфорт взаимодействия с функцией. Важный раздел посвящен опыту взаимодействия, выявляющему проблемы и трудности, с которыми сталкиваются пользователи. Обратная связь о функциональности помогает собрать отзывы о полезности и восприятии функции. Завершает анкету общая оценка пользовательского опыта и раздел для дополнительных комментариев, где участники могут выразить свои мысли и предложения.
Примеры вопросов в анкете UX теста юзабилити ключевых функций в интерфейсе:
Сценарный тест: В мобильном приложении сервиса доставки есть возможность сделать заказ, который доставят сегодня. Ваша задача — оформить товары которые в корзине с доставкой на сегодня.
Как вы оцениваете удобство использования данной функции? (1 - очень неудобно, 5 - очень удобно)
Насколько легко было найти данную функцию? (1 - очень сложно, 5 - очень легко)
Сколько времени вам понадобилось для выполнения задачи с данной функцией? (менее 1 минуты, 1-3 минуты, более 3 минут)
Как бы вы оценили сложность выполнения задачи? (1 - очень сложно, 5 - очень легко)
Какие трудности вы испытывали при использовании данной функции? (открытый вопрос)
Были ли у вас недоразумения при использовании функции? Если да, опишите. (открытый вопрос)
Что вам понравилось в данной функции? (открытый вопрос)
Что бы вы изменили или добавили в данную функцию для улучшения? (открытый вопрос)
Как вы в целом оцениваете ваш опыт использования данного продукта? (1 - очень плохо, 5 - очень хорошо)
Сравнительное тестирование интерфейсов
Сравнительное тестирование интерфейсов, или парное сравнение, — это метод оценки различных вариантов дизайна, позволяющий выявить наиболее эффективные и удобные решения для пользователей. Этот подход помогает определить предпочтения пользователей, понять, какой интерфейс более привлекателен для целевой аудитории, а также улучшить пользовательский опыт, выявляя проблемные элементы для оптимизации. Кроме того, тестирование позволяет оценить эффективность версий интерфейсов по критериям скорости выполнения задач и уровня ошибок, а также поддерживает принятие обоснованных решений на основе предпочтений пользователей и собранных данных.
Структура анкеты для UX теста сравнения интерфейсов начинается с введения, где участникам объясняется цель тестирования и информируется о сравнении двух интерфейсов. Далее проводится оценка общей привлекательности, чтобы выяснить, какой интерфейс более привлекателен на первый взгляд. Затем участники оценивают удобство выполнения задач, что помогает определить легкость выполнения заданий на каждом из интерфейсов. Важно выявить трудности, с которыми столкнулись пользователи, и провести сравнение функциональности для оценки удобства реализованных функций. Также задаются вопросы о визуальном восприятии, чтобы определить, какой интерфейс более комфортен в дизайне. Завершают анкету общая оценка и рекомендации, позволяющие получить общее впечатление участников и советы по улучшению интерфейсов.
Примеры вопросов в анкете UX теста сравнения интерфейсов:
Пожалуйста, ознакомьтесь с двумя интерфейсами, которые вы будете оценивать. Убедитесь, что вы понимаете, какие задачи необходимо выполнить.
Какой интерфейс вам кажется более привлекательным? Почему?
Оцените общий внешний вид интерфейсов по шкале от 1 до 5 (1 - очень плохо, 5 - отлично).
Как вы оцениваете доступность необходимых функций в интерфейсе A? (1 - неудовлетворительно, 5 - отлично)
Как вы оцениваете доступность необходимых функций в интерфейсе B? (1 - неудовлетворительно, 5 - отлично)
Как вы оцениваете цветовую палитру интерфейса A по шкале от 1 до 5, где 1 — очень плохо, а 5 — отлично?
Как вы оцениваете цветовую палитру интерфейса B по шкале от 1 до 5, где 1 — очень плохо, а 5 — отлично?
Какой из интерфейсов вы бы выбрали для использования в реальной жизни? Почему?
Есть ли какие-либо предложения по улучшению интерфейсов, которые вы хотите сделать?
Тестирование процессов в интерфейсах
Тестирование процессов в интерфейсах фокусируется на оценке целостности и логики последовательности действий, необходимых для выполнения определенных задач. Основная задача заключается в выявлении узких мест и затруднений.
Структура анкеты для UX теста процессов в интерфейсах начинается с введения, цель которого — получить общее представление о восприятии интерфейса пользователями. Далее идет оценка удобства выполнения процесса, чтобы понять, насколько легко пользователям выполнять заданные действия. Важным этапом является оценка логики и последовательности действий, выясняющая, насколько шаги процесса кажутся логичными и последовательными. Завершает анкету анализ удовлетворенности и общих впечатлений, который помогает оценить общее удовлетворение пользователей после теста.
Примеры вопросов в анкете UX теста процессов в интерфейсах:
Сценарное задание: "Пожалуйста, выполните задачу: оформите заказ на продукт X."
Как бы вы оценили легкость выполнения этой задачи по шкале от 1 до 5, где 1 — это очень трудно, а 5 — это очень легко?
Какие трудности вы испытывали во время выполнения задания? (Открытый вопрос).
Насколько понятен процесс оформления заказа? Оцените по шкале от 1 до 5, где 1 — это совсем непонятно, а 5 — это очень понятно.
Оцените общее время, затраченное на выполнение задачи, по шкале от 1 до 5 (где 1 — слишком долго, 5 — быстро).
Как бы вы описали ваш общий опыт выполнения задачи? (Открытый вопрос)
Есть ли у вас предложения по улучшению процесса оформления заказа? (Открытый вопрос)
Какие функции, на ваш взгляд, отсутствуют в процессе и могут улучшить ваш опыт? (Открытый вопрос)
Тестирование понимания текстов в интерфейсе
Цель тестирования понимания текстов заключается в оценке, насколько эффективно пользователи воспринимают и понимают текстовые элементы интерфейса. Основные задачи включают выявление сложных терминов и фраз, которые могут вызвать недопонимание.
Структура анкеты для UX теста понимания текстов в интерфейсе включает введение и общие вопросы, которые помогают получить общее представление о восприятии текстов пользователями. Затем проводится оценка понимания текста, чтобы выяснить, насколько легко пользователям воспринимать и интерпретировать текстовые фрагменты. Важный этап — оценка логики и ясности, помогающая понять, насколько логично и последовательно представлены идеи. Завершает анкету анализ соответствия ожиданиям, который определяет, насколько текст соответствует ожиданиям и пониманию пользователей.
Примеры вопросов в анкете UX теста понимания текстов в интерфейсе:
Насколько важна для вас ясность текста в интерфейсе? (Оценка от 1 до 5, где 1 — совершенно не важна, а 5 — крайне важна)
Насколько легко вам было понять данный текст? (Оценка от 1 до 5, где 1 — очень трудно, а 5 — очень легко)
Были ли слова или фразы, которые вы не поняли? Если да, укажите, какие именно.
Какие мысли у вас возникли при чтении этого текста?
Насколько логичными вам показались идеи, изложенные в тексте? (Оценка от 1 до 5, где 1 — совсем нелогично, а 5 — очень логично)
Есть ли элементы текста, которые вам показались запутанными или неясными? Если да, уточните.
Как бы вы описали основные идеи текста своими словами?
Насколько текст соответствовал вашим ожиданиям относительно его содержания? (Оценка от 1 до 5, где 1 — совершенно не соответствовал, а 5 — полностью соответствовал)
Какие аспекты текста вы ожидали увидеть, но не нашли?
Есть ли элементы текста, которые, по вашему мнению, не соответствуют функционалу интерфейса?
⛔️ Когда не стоит проводить немодерируемые UX тесты
Если вы не можете четко сформулировать цели исследования
У любого исследования должна быть четко сформулированная цель, не имея чёткой цели мы не сможем в неё попасть
Если результаты исследования не повлияют на принятие решения
В конкретной ситуации какие-то сильные обстоятельства диктуют решение и полученная из исследований информация не сможет их перевесить. В этом случае не имеет смысл тратить ресурсы на исследование
Если к моменту завершения исследования информация будет уже не актуальна
Любое исследование требует времени на подготовку, проведение, анализ результатов. Если вы не можете сдвинуть дедлайн решения, а до этого дедлайна провести исследование не получается - не стоит проводить исследование
Если затраты на проведение исследования превысят пользу от него
Как много вы можете потерять (не заработать), если отказавшись от исследования вы примете неправильное решение?
✅ Чек-лист: о чем еще подумать перед запуском немодерируемого UX теста?
Спросите себя «Какое знание я хочу получить?»
Подумайте, какой формат ответа вам подойдет
Например свободный ответ, клик или выбор из нескольких вариантовПроверьте, что в формулировке вопроса не скрыто два вопроса
Посмотрите, насколько вопрос понятен и однозначен
Дайте контекст, если это нужно для выполнения задания
Например, респонденту будет важно понять, как он оказался на странице чекаутаЕсли возможно, запускайте тест или опрос не сразу на всю выборку
Лучше сделайте пилотную версию на 20–30 респондентов. Так по первым ответам отловите проблемы и сможете их исправитьПокажите исследование коллегам в своей команде
Возможно, у них будут ценные комментарииПодумайте, какие пути в прототипе оставить, а какие убрать
Не оставляйте только один путь — респонденты точно по нему пройдут, но результаты теста вам не пригодятсяПосмотрите, насколько данные на макете реалистичны
Молоко не может стоить 500 рублей, а призыв к действию «Ну пожалуйста, купите» в реальной жизни никто не пишетПосмотрите, насколько понятно, о каком элементе вы спрашиваете
Нужный объект можно поместить в рамку или указать на него стрелкой. Если указываете стрелкой, убедитесь, что рядом с нужным элементом не стоят другие, — иначе респондент не поймет, на что надо обратить вниманиеЕсли сравниваете два и больше экрана, проверьте, что макеты различаются только той деталью, которую тестируете
Посмотрите, совпадают ли качество и размер двух или больше макетов, если проводите Preference-тест
Поместите прототип в отдельный файл в Figma или другом дизайнерском редакторе
Тогда макет будет быстрее открываться и меньше зависатьОткройте доступ для всех, если макет или прототип открывается по ссылке
Проверьте, что макет подходит к устройству, с которого респондент будет выполнять задание
Отключите подсказки в Figma, куда можно нажать, если они есть
На этом всё! Спасибо, что прочитали! Надеюсь, вы узнали много полезного о создании анкет для немодерируемых UX-тестов.
Сохраняйте себе другие полезные материалы из нашего коллективного телеграм-канала Ozon Design. Делитесь материалами с коллегами и развивайтесь вместе! 💙