В гостях у PropellerAds. Март 2018

1. Product Discovery
Фейлы и успехи

2. Никита Ефимов
Senior Product Manager, Selectel
Product Visionary, UXPressia
efimov.nikita@gmail.com
fb.com/nikita.efimov
slideshare.net/nefimov

3. The only source of knowledge is
experience.“
Albert Einstein

4. Product Discovery
синхронизируемся

5. Product discovery is the process
of determining what the problem is,
how to solve it, and how to know
that you solved it.
“

6. A product discovery is about
ensuring that the right product is
built for the right audience.
“

7. On Day One, a
start-up is a faith-
based initiative built
on guesses.
“
Steve Blank

8. Галлюцинации

9. Мы приняли такой подход
Пользователи
Бизнес
Команда разработки
Ценно?
Реализуемо?
Удобно?
UX PO
Dev

10. О каких шишках расскажу
• Работа с гипотезами
• Прототипирование
• Направления исследований
• Dogfooding
• Исследования в рамках пилотов
• Публичные исследования
• Модель Кано

11. Немного о проекте
контекст, ограничения и возможности

12. Особенности разработки
Win, Linux, Mac iOS, Android, Tizen
Много приложений

13. Особенности разработки
• Компания 400+
• Много команд разработки
• Единое ядро

14. Целевая аудитория
• B2E
• SMB / SOHO
Основная на тот
момент• Образование
• B2С

15. Разные типы фич
• Понятная и требуемая функциональность
• Что-то новое и инновационное
+ большой бэклог, т.к. продукты
активно развиваются

16. Ограничения исследований
• Никакой встроенной аналитики
• Нет возможности быстро выкатить и откатить
• Никаких сплит-тестов
Частное облако

17. Работа с гипотезами

18. От идеи к решению
Решение
Идея

19. Понимание проблемы
Проблема

20. Шаг назад
• Ту ли проблему решаем?
• Есть ли другие проблемы?
• Что окружает эти проблемы (контекст)?
• В каких ситуациях эти проблемы возникают?
• Кого они затрагивают?
• и т.д.

21. Два ключевых навыка
• Анализ проблемы
• Поиск альтернативных решений

22. Две области

23. Две области
Designing the right things Designing things right

24. Ключевые принципы
Расходящееся мышление
(Diverge)
Сходящееся мышление
(Converge)
Осуществление выбораСоздание альтернатив

25. Проблема
Часто начинаем с проработки решения, без
чёткого понимания решаемых проблем,
контекстных ситуаций и т.д.
Решение
Заполняем Feature Canvas:
• базовый анализ причинно-следственных связей
• разбор контекстных ситуаций
• осознание возможностей и ограничений

26. Feature Canvas
featurecanvas.com

27. Проблема
Долго прорабатываем один вариант. Потом
приклеиваемся к нему и усердно защищаем.
Решение
• 6-к-1 для всех задач
• Как минимум 2 варианта для сравнения

28. Разные типы гипотез
• Продуктовые
• Интерфейсные
• Исследовательские

29. Продуктовые/интерфейсные
• “Мне кажется, что …”
• Критерии успешности (как поймём, что достигли
цели)
• Критерии провала (как поймём, что всё плохо)

30. Исследовательские
• Цель исследования (что хотим узнать)
• Какую гипотезу(-ы) проверяем
• Кто для этого нужен
• Что будет, если не проведём/чем поможет, если
сделаем
• Что именно будем исследовать (метрики)

31. Прототипирование

32. Проблема
Прототип – это бета-версия продукта. На код
потрачено время, от него сложно избавиться.
Решение
• Учимся говнокодить
• Дизайнеры пишут код
• Wizard of Oz

33. Проблема
Сразу начинается проверка технической
реализуемости вместо проверки валидности
гипотезы.
Решение
Переход к последовательности:
1. Проверка валидности гипотезы
2. Проверка тех. реализуемости
3. Проверка конкретной интерфейсной реализации

34. Проблема
Слишком много прототипов. Люди зашиваются.
Решение
Можно тестирования проводить с
использованием конкурентов: искать инсайты
и проверять анти-гипотезы.

35. Направления
исследования

36. Какие направления выделяем
1. Формирование гипотез
a. Изучение рабочих процессов
b. Проблемы взаимодействия в рамках рабочих процессов
2. Проверка валидности гипотез
a. Жизнеспособность гипотезы
b. Работоспособность на базе прототипов
3. Проверка удобства приложений
a. Проверка конкретного приложения / фичи
b. Проверка в рамках сквозных сценариев
4. Изучение обратной связи
a. От наших пользователей
b. От использования продуктов конкурентов

37. Идеальный процесс
1 формирование гипотез
a b
2 проверка валидности
a b
3 проверка удобства
a b
4 фидбек
a

38. Но все они могут (и
должны) идти
параллельно

39. На постоянной основе
2 проверка валидности
a
b
4 фидбек
a
b
1 формирование гипотез
a
b
3 проверка удобства
a
b

40. Круги пользователей
Dogfooding
Альфа-группа
Пред-релиз
Все пользователи

41. Сейчас чуть по-другому
Все
Dogfooding
Гараж
Альфа
Бета
Сплит

42. Dogfooding
Eat your own dog food

43. Проблема
Далеко не все хотят использовать свои же
продукты.
Решение
• Диктаторство
• Часть бренд-материалов и описание процессов и
спецификаций перенесли в наши приложения
• С рядом команд перевели общение в наш
мессенджер
• и др.

44. Проблема
Не все знают, кому оставлять обратную связь
(компания большая).
Решение
• Единая точка входа для внутренней
обратной связи
• Распечатки-зазывалки
• Картинки после демо
• Рассылки
• Активная реклама:

47. Проблема
Сложно мотивировать команды проверять
свои решения.
Решение
Постоянные коридорные тестирования.
Но не столько, чтобы проверить корректность
решения, сколько для вырабатывания
привычки.

48. Пилотные внедрения
Замена триалу

49. Обращайте
внимание на
“триальщиков”

50. Оценка привычек и первого впечатления
• Оценка ожиданий и силы привычек
• Какой онбоардинг нужен
• На чём сконцентрироваться: лёгкий старт работы
или улучшение работы пользователя
Скопировать реализацию конкурентов или сделать по-другому, но удобнее?

51. Что сделали
Диагностический опросник (а-ля System Usability Scale)
Решение
• Перестали считать “попугаи”
• Стали отслеживать тренды (всплески)
• Повод для общения
Проблема
Некоторые заполняют “на отвали”.

53. Что сделали
Диагностический опросник (а-ля System Usability Scale)
Решение
• Перестали считать “попугаи”
• Стали отслеживать тренды (всплески)
• Повод для общения
Проблема
Некоторые заполняют “на отвали”.

54. Изучение примеров документов
• Часто присылают примеры типовых документов
• Помогает косвенно оценить, что именно делают

55. Публичные
исследования

56. Ограничения
• Не можем пойти к хипстерам в старбакс
• Часто нужно рассматривать сложные сценарии
(сквозные)
• Далеко не всегда есть смысл зазывать в соц. сетях
Часто не в ЦА, сложности отсева неподходящих
• Необходимость продумывать каждую деталь
“Помогите сделать лучше…” <- “А почему сразу не сделали хорошо?”

57. Портал для исследований
• Все исследования в одном месте
• Направляем сюда после пилотов
• Далеко не всегда пользователи есть в социалках
Ну или их там оооочень сложно достать
• Легче работать с мотивацией участвовать

58. Проблема
Заблуждение: мотивировать можно только
деньгами, а бюджета нет.
Решение
3 типа мотивации:
1. Люди любят помогать
2. Люди любят казаться умными/говорить умные
вещи
3. Люди любят чинить/исправлять неработающее

59. Модель Кано
Есть свои подводные камни

60. Отличный помощник
• Проверить гипотезу ничего не создавая
• Проверить ожидания пользователей

61. Сложности
• Восприятие вопросов
Классические варианты ответов не всегда в тему
• Восприятие самого задания
• Обязательно погружать в контекст
• Использовать картинки, гифки, видео

62. Классика (en)
• I like it this way
• It expect it this way
• I am neutral
• I can live with it this way
• I don’t like it this way

63. Классика (ru)
• Мне это нравится
• Я ожидаю, что эта функциональность будет в
продукте
• Я отношусь к этому нейтрально (мне всё равно)
• Я могу это терпеть
• Мне это не нравится

64. Шкала Лайкерта
Мне это не
нравится
Мне это
нравится
Мне всё равно

65. Вариации
• This would be very helpful to me
• This is a basic requirement for me
• This would not affect me
• This would be a minor inconvenience
• This would be a major problem for me
• Это будет очень полезно для меня
• Это основное требование для меня
• Это не повлияет на меня
• Это вызовет небольшое неудобство
• Это будет серьезной проблемой для меня

66. Реальный пример
• Это мне очень помогает в работе
• Так и должно быть
• Мне всё равно
• Мне это не нравится, но я могу терпеть
• Это мне очень мешает в работе
Как вы относитесь к наличию предпросмотра
последнего сообщения в списке чатов?

67. Про отношение и ожидания, а
не про то, что хочет пользователь.“

68. Подытожим

69. Подытожим
• Гипотезы не только продуктовые, но и
исследовательские
• Прототип – это не бета-версия продукта. Нужно
“учиться” говнокодить
• Можно тестировать с помощью конкурентов и
проверять анти-гипотезы
• Dogfooding и коридорные тестирования как способ
приучить к постоянной проверке гипотез

70. Подытожим
• Триальщики – это отличный источник инсайтов
• Мотивировать участвовать в исследованиях можно
и без денег
• Кано – это круто, но требует внимательного
отношения к формулировкам

71. Ну вот и всё…
slideshare.net/nefimov
efimov.nikita@gmail.com
fb.com/nikita.efimov
For graphics thanks to freepik.com