Tout est hypothèse, reste à savoir comment les valider ! Dans le Product Management, on passe notre temps à poser des hypothèses sans même s'en rendre compte. Nous avons exploré pendant le meetup School Of PO des méthodes permettant de poser des hypothèses en équipe et des expérimentations pour les valider.

1. Tout est hypothèse
School Of PO - 27/06/2018
Christopher Parola - Lead Product Manager

2. Christopher Parola - Tout est hypothèse - 2018
Hypothèse : une présentation sur les hypothèses va vous plaire
Fact : 90% des POs que je vois me disent
qu’ils ont du mal à expérimenter
Hypothèse : une présentation sur les
hypothèses peut aider à expérimenter et
terminer les débats sur “doit-on faire cette
fonctionnalité ou non ?”
Test : présentation sur les hypothèses à la
School Of PO.
● Mesure d’un ROTI.
● Questionnaire meetup +15j
Résultat : TBD

3. C’est quoi, une hypothèse ?Qu’est-ce qu’une hypothèse ?

4. Christopher Parola - Tout est hypothèse - 2018
Qu’est-ce qu’une hypothèse ?
(Didactique) Supposition que l’on fait sans se
demander si elle est vraie ou fausse, mais
seulement pour en tirer des conséquences à
vérifier.
(Mathématiques) Proposition que l’on avance
soit comme point de départ de la démonstration
d’un théorème, soit comme donnée d’un
problème.

5. Christopher Parola - Tout est hypothèse - 2018
Et dans le produit ?
Toutes les décisions que l’on prend sont des
hypothèses plus ou moins vérifiées.

6. Christopher Parola - Tout est hypothèse - 2018
Une idée de produit ?
Situation : JIRA, c’est nul. Je vais faire l’outil PARFAIT de pilotage agile.
Hypothèses :
● Ma solution peut être meilleure que JIRA
● Les utilisateurs de JIRA vont les quitter pour ma solution
● Les utilisateurs de JIRA ont tous le même problème
● Résoudre le problème de tous les utilisateurs de JIRA ne conduira pas à re-créer le monstre JIRA

7. Christopher Parola - Tout est hypothèse - 2018
Une fonctionnalité pour augmenter un taux de conversion ?
Situation : J’ai créé une User Story pour changer la couleur et le texte du bouton de création de compte
Hypothèses :
● Le texte du bouton n’était pas clair
● L’aspect du bouton n’indique pas clairement qu’il s’agit d’un bouton (couleur, forme…)
● Le changement va conduire à une augmentation de la conversion de X%

8. Christopher Parola - Tout est hypothèse - 2018
Une refonte iso-fonctionnelle ?

9. Une nouvelle loi ?

10. Exemple : mise en conformité avec la loi ALUR

11. Exemple : mise en conformité avec la loi ALUR

12. Les hypothèses, c’est bien pratique

14. Christopher Parola - Tout est hypothèse - 2018
Avez-vous déjà vu ?
“Je connais le métier,
c’est cette feature qu’il
faut faire”
“Ce matin je me suis
levé et je me suis dis…”

15. Utilisation des Business User StoriesLa mesure pour arbitrer

16. Poser une hypothèse ?Poser une hypothèse

17. Christopher Parola - Tout est hypothèse - 2018
La Business User Story
🤔

18. Christopher Parola - Tout est hypothèse - 2018
Le Lean Canvas

19. Christopher Parola - Tout est hypothèse - 2018
L’arbre d’hypothèses

20. Christopher Parola - Tout est hypothèse - 2018
L’arbre d’hypothèses
Stakeholders / OKR Team / Brainstorm Team / Design Studio

21. Christopher Parola - Tout est hypothèse - 2018
Commencer par une question
Pourquoi le bouton
Estimer ne converti
qu’à 10% ?
?

22. Christopher Parola - Tout est hypothèse - 2018
Laisser libre cours à ses idées
● Deux boutons côte à côte s’annulent
● Le texte n’est pas clair
● Quelle différence entre estimer et évaluer
● La carte à droite prend trop l’attention de l’utilisateur
Tips :
● Ne pas utiliser un formalisme particulier
à ce moment, juste collecter les idées
● Si la question est trop large, on risque
d’être entrain de poser des hypothèses
produit. Dans ce cas, mieux vaut utiliser
le Lean Canvas

23. Christopher Parola - Tout est hypothèse - 2018
Convertir les idées en hypothèses formalisées
Si <réalisation>
Alors <résultat>
Car <raison d’y croire>

24. Christopher Parola - Tout est hypothèse - 2018
Tips :
● Le plus important est l’élément CAR :
c’est lui qui vous permettra de choisir
entre plusieurs hypothèses à valider
(celui qui a la clause CAR la plus forte)
● Souvent, déterminer un CAR permettra
de prendre conscience que l’on se base
sur un jugement et non une réalité
● Deux boutons côte à côte s’annulent
○ Si les deux boutons n’étaient pas à côté, alors ils ne lutteraient pas pour l’attention de
l’utilisateur car le second serait sous la ligne de flottaison
Formuler une hypothèse

25. Christopher Parola - Tout est hypothèse - 2018
Tips :
● Les expérimentations peuvent être
quantitatives (AB Test…) comme
qualitatives (interviews, tests
utilisateurs…)
● Sur un produit existant, la réponse est
déjà disponible, il faut aller la chercher.
● Deux boutons côte à côte s’annulent
○ Si les deux boutons n’étaient pas à côté, alors ils ne lutteraient pas pour l’attention de
l’utilisateur car le second serait sous la ligne de flottaison
■ Retirer le second bouton
■ Utiliser un lien à la place du second bouton
■ Regarder des sessions utilisateurs pour voir si les deux boutons luttent réellement
Formuler une expérimentation pour valider l’hypothèse

26. Christopher Parola - Tout est hypothèse - 2018
Arbre de tests pour nos deux boutons d’estimation
Le double CTA des pages prix
nuit au taux de clicH1
T1 Retirer le second bouton
Pourquoi le bouton
Estimer ne converti
qu’à 10% ?
?
To Be DefinedH2
T2
Utiliser un lien à la place du
second bouton
T3 Regarder les sessions utilisateur

27. Christopher Parola - Tout est hypothèse - 2018
Comment on définit une KPI ?
1. Benchmark
2. Archéologie
3. Si c’est en dessous de X, ça ne vallait pas le coup
4. 10% c’est de l’optimisation, 100% c’est de
l’innovation

28. Valider une hypothèse

29. Christopher Parola - Tout est hypothèse - 2018
Des outils pour valider une hypothèse
AB Tests
Interview
Tests utilisateurs
Questionnaires
Focus Groups

30. Christopher Parola - Tout est hypothèse - 2018
Pourquoi utiliser des AB Tests ?
Trafic extrêmement sensible aux
événements externes.
Volume d’utilisateurs suffisant.

31. Christopher Parola - Tout est hypothèse - 2018
10% du trafic
20% du trafic 100% du trafic
50% du trafic
Méthode de déploiement progressif : 10 - 20 - 50 - 100

32. Christopher Parola - Tout est hypothèse - 2018
Attention aux pièges

33. Christopher Parola - Tout est hypothèse - 2018
Tips :
● Un AA Test va tester votre outillage de
test et non une version par rapport à
une autre. Si en testant la même
version vous obtenez des résultats
différents, c’est probablement que votre
solution de test ne fonctionne pas
Ne pas hésiter à AA Tester pour trouver les erreurs

34. Partager régulièrement ses
apprentissages

35. En démo, des fonctionnalités ET des apprentissages

36. Christopher Parola - Tout est hypothèse - 2018
Exemple : fiche de test pour construire un carnet d’apprentissages
Fact : 10% des utilisateurs arrivant
sur les conditions d’acquisitions
abandonnent l’estimation.
Hypothèse : une partie de ces
contacts seraient allés au bout de
leur estimation.
Test : retrait des conditions
d’acquisitions à 30% des visiteurs.
Résultat : augmentation de 4 points
de la performance de l’estimation.

37. A vous de jouer

38. Christopher Parola - Tout est hypothèse - 2018
Pour toute question ou rester en contact :
● Medium
● Twitter
● LinkedIn