Експеримент – один з основних методів наукового дослідження, в якому вивчення явищ відбувається за допомогою доцільно вибраних або штучно створених умов. Для інтерпретації цих явищ ми фіксуємо результат експерименту і потім робимо висновки.
Залежно від цілей та об'єкту валідації в продуктовому дизайні можна проводити багато різних експериментів: від спостереження за користувачами, які про вас навіть не знають – до канареєчного запуску продукту.
Спостереження
Спостереження (observation) – метод дослідження, що передбачає спостереження за тим, як користувач виконує свої задачі на відстані. Ви можете спостерігати за людьми в аеропорту, в магазині, на майстеркласі. Спостереження можна поєднувати з інтерв'ю — підійти та запитати людину про той досвід, що ви щойно спостерігали, аби підтвердити результати спостереження.
Інтерв'ю
Структурована розмова, що має на меті проговорити певний досвід користувача.
Партисипативний воркшоп
Активність, яку можна виконувати разом з користувачем, щоб краще зрозуміти його наявний досвід або створити новий. На відміну від інтерв'ю в воркшоп включають певні вправи з підручними матеріалами, що дозволяють краще зрозуміти досвід.
Приклад: можна разом намалювати криву емоцій на мапі клієнтського шляху.
Валідація концепції
Демонстрація користувачеві концепту з метою валідації передбачуваної цінності, естетичної привабливості та готовності платити.
Фантомний продукт (Vaporware)
Варіант кнопки, що веде в нікуди, доступної всьому світу. Це можуть бути як банери з рекламною пропозицією і прикріпленою формою з запрошенням поговорити з командою продажів, так і цілі посадочні сторінки з детальним описом ще не створеного продукту.
Вони відкриті на ввесь світ та часто підтримуються власною маркетинговою кампанією. Головна їх задача – вивчення реакції потенційних користувачів на продуктову пропозицію та готовність платити.
Такі лендінги можуть пропонувати:
- Зареєструватись на раннє тестування
- Зареєструватись на новини компанії
- Підтримати ідею фінансово (краудфандинг)
- Передзамовлення (ще може розглядатися як спосіб інвестиції)
Компанії без розкачаного бренду зазвичай можуть експериментувати з такими лендінгами більш вільно, коли вже існуючі компанії з репутацією мають бути обережнішими, аби не розчарувати існуючих лояльних користувачів.
Юзабіліті тестування
Надання користувачу доступ до продукту разом з певним завданням. Від того, як користувач впорається з завдання ми робимо висновок щодо зручності та ефективності продукту для даного користувача. Для більш глобального висновку рекомендується провести тестування мінімум з 5-ма користувачами з однієї групи.
Пілотний запуск
Це ранній запуск продукту з метою зібрати в працюючу систему та відпрацювати повний сценарій взаємодії всіх груп користувачів, протестувати продукт в робочому середовищі, перевірити прийняття продукту на стороні бізнесу і таким чином підготуватись до повномасштабного запуску.
Пілот обов’язково запускається на обмежену групу користувачів. Це може бути:
- Невелика аудиторія
- Обмежена локація
- Нелімітована пропозиція
Вартість запуску такого експерименту і репутаційні втрати у випадку невдачі відносно невисокі. Точність отриманих даних середня через лімітованість вибірки.
А/В тест
Це ранній запуск продукту двох альтернативних версій конкретної функціональності на певний відсоток (10%, 30%, 50%) основної аудиторії в проді з метою порівняти ці версії.
Вартість такого експерименту досить висока, бо потребує:
- Повністю розробити дві версії функціональності
- Наявність певної інфраструктури для запуску таких експериментів:
- Вмикання різних варіантів/версій функціональності в працюючому продукті
- Автоматичного рівномірного розподілу користувачів між двома версіями
- Врахування сезонності
Коли ми запускаємо версію функціональності, в якій не до кінця впевнені, з'являється ризик втрати прибутку. Чим більша аудиторія, що буде взаємодіяти з менш вдалою версією і триваліший експеримент тим більше компанія втратить.
Точність зібраних даних такого експерименту висока, бо маємо якісну вибірку реальних користувачів, тривалий в часі експеримент фактично без обмежень.
Канарейковий запуск
Цей метод частіше використовують розробники. Суть його в тому, що планований запуск вже зробленої функціональності запускається спочатку на обмеженій вибірці користувачів (до 10%). Коли тест показує, що все працює і досвід користувача не погіршився, функціональність вмикають решті користувачів. По своїй суті дуже схожий на А/В, але всього на один варіант нової чи зміненої функціональності.
