До початку тестування нам треба перевірити, що:
- Наш об’єкт дослідження у робочому стані
- Наші інструменти для збору даних готові
- Ваш покроковий план експерименту готовий і під рукою
Вимоги до об'єкта дослідження
Доступ
На початок експерименту у користувача має бути можливість отримати доступ та побачити та провзаємодіяти з об’єктом дослідження. Це може бути:
- Тимчасове посилання на прототип
- Тимчасовий аккаунт для входу в робочий застосунок
- Можливість показати на своєму екрані
При цьому доступ до матеріалів має бути закритий одразу після завершення експерименту. Оскільки ми часто працюємо з експериментальними даними та не хочемо, щоб пізніше доступ до наших екранів отримали недоброчесні конкуренти.
Версія
Якщо ви проводите експеримент в середовищі, яке постійно змінюється, як то робочий файл фігми для командного доступу чи тестове середовище вашого продукту, вам треба домовитися, щоб на час тривалості експерименту ваш прототип не змінювався. Зміна прототипу призведе до зміни результатів і вам буде важко зробити висновок.
Формат
Ми маємо переконатися, що екран, на якому наш користувач переглядає наш об’єкт дослідження підтримується. Про відповідність пристроїв краще подбати наперед.
Якщо ви скидаєте посилання на десктопну версію користувачу, що зайшов з мобільного, наш експеримент можна вважати невдалим.
Інструменти для збору даних
Фіксація результату взаємодії
Відео експерименту
Відео експерименту з користувачем використовують для фіксації результату і для внутрішньої демонстрації особливостей взаємодії.
Вам треба подумати наперед, як ви хочете зафіксувати результат дослідження. Фіксація може відбуватися:
- На вашому пристрої. Коли ви надаєте пристрій респонденту
- На пристрої респондента. Тоді вам треба запросити дозвіл на таку фіксацію, надати відповідні інструкції щодо фіксації та запросити результат після закінчення експерименту.
- На сторонньому пристрої. Відеокамера за плечем респондента, Zoom з записом відео в хмарне сховище тощо.
Логи на проді
Якщо у вашого продукту вже є логи, ви можете дістати їх після експерименту. Такі дані буде простіше порівняти з даними інших користувачів.
Фіксація відповідей респондента
Відповіді респондента можна зафіксувати в текстовому форматі, можна дати респонденту форму, яку він заповнить чи записати його відповідь на відео.
Покроковий план експерименту
Це особливо важливо, коли ви тільки вчитеся проводити експерименти.
Ви можете створити документ, що описує послідовні кроки експерименту і який ви можете використовувати як чек лист. Типовий чек лист включає:
- Коротку розповідь про дослідників, об’єкт і мету дослідження
- Інформація для учасників дослідження
- Участь в дослідженні повністю добровільна
- Тут не має неправильних відповідей. Будь-яка ваша відповідь є прийнятною і саме її ми хочемо почути
- Ми не перевіряємо вас, а лише застосунок
- Наша розмова буде записана на відео. Нам потрібне це відео, щоб проаналізувати результати дослідження. Ми не будемо показувати її стороннім особам без вашої попередньої згоди.
- Якщо ви почуваєтесь не комфортно, ви можете призупинити чи повністю зупинити нашу розмову в будь-який момент
- Збір релевантних демографічних даних про респондента
- Демонстрація чи взаємодія респондента з додатком
- Опитування за результатами взаємодії
- Заключне слово (подяка та винагорода)
Приклад: Ми співробітники агенції BetterUX, вивчаємо для компанії Міжнародні Авіалінії України відношення пасажирів до перекусів на борту літака.
Приклад: Наша мета – покращити додаток.
Приклад
Пілот
Після того, як ви все зібрали й підготували, проводиться пілотний прогон – з колегою в якості респондента ви проходите всі етапи експерименту і перевіряєте:
- Чи все працює
- Чи фіксуються результати
- Чи можете ви зробити висновок на основі зібраних даних
Після пілотного прогону ви можете підкоригувати свій експеримент.