Faire du testing une culture : ces organisations devenues expertes

Post on 14-Jul-2015

426 views 0 download

Tags:

Transcript of Faire du testing une culture : ces organisations devenues expertes

#CROissants avec Optimizely & Uptilab!

Mercredi 10 décembre 2014

09H00 – 11H00! !

Pershing Hall!

Faire du testing une culture!

Ces organisations devenues expertes!

Mercredi 10 décembre 2014

3"

Faire du testing une culture Ces organisations devenues expertes

1. Optimizely en deux mots

2. Decitre

4. Questions/Réponses

3. Autoscout

1. Optimizely

!

!

!

Dan! Pete!

2006 : "Dan Siroker and Pete Koomen "— Product Manager, Google!

2008 : "Dan — Campagne Obama!

2008 – 2010 : "Carrotsticks, Spreadly, "et Y Combinator.!

2010 : Création d’Optimizely!

Avril 2013 : Levée de $28M pour s’internationaliser!

Mai 2014 : Levée de $57M!

$28M!

$57M!

+8000 Clients!

2. Decitre

7"

L’enseigne Decitre

> Librairie indépendante fondée en 1907 > 1,5 millions de visiteurs uniques mensuels

> Pays d’origine : France > 350+ collaborateurs

8"

L’équipe face au testing Du simple test au processus de testing en continu

Depuis quand ? > Premiers pas mi-2013 > Client « Enterprise » Optimizely fin 2013

Pourquoi ? > Panel trop large de visiteurs pour deviner le design idéal > En finir avec les réunions interminables sur le choix d’une couleur > Obtenir des mesures chiffrées de l’impact des modifications

Objectivité > Intuition!

9"

L’organisation Le testing, une méthodologie qui rassemble

Brainstorming"

Monitoring"

Planning"

Tracking"

Repor9ng"

Toute l ’équipe e-commerce propose des idées!

!

Centralisation des échanges + historisation dans Basecamp!

Priorisation des tests!

Définition des cibles, variantes et KPI!

Toute l’équipe a accès aux résultats!

10"

La mise en œuvre Du simple test au processus de testing en continu

Mise en œuvre en environnement de pré-production > Par les collaborateurs fonctionnels > Avec les développeurs si nécessaire

Passage en production > Validation par l’équipe technique > Lancement du test

11"

Les défis Les challenges rencontrés lors de la mise en place du programme de testing

Défis opérationnels

> Adaptations techniques dans certains cas, utiles sur le long terme > Disposer de suffisamment de trafic Défis organisationnels

> Mobiliser son équipe, puis le groupe > Changer la culture « toute modification doit être justifiée » > Ne jamais hésiter à inviter ses collègue à faire un test > Savoir communiquer autour des résultats

12"

Montée en compétence Tests simples -> Tests élaborés

Du simple test sur le wording d’un CTA…

…au redesign complet de la fiche produit…

…en passant par le bloc d’ajout au panier.

13"

Montée en compétence Editeur visuel -> Commande javascript

14"

Montée en compétence Initiative individuelle -> Effort de groupe

Un CTO convaincu!

Dir. E-Commerce!

L’équipe e-Merchandising!

Chefs de projet!

Divers observateurs!

3. Autoscout24

16"

L’enseigne Autoscout24

> Plus grand portail d’achat/vente de véhicules en Europe > 20 millions d’utilisateurs

> Pays d’origine : Allemagne > Présent dans 18 pays

17"

L’équipe face au testing Le testing, un état d’esprit

« Je ne sais qu’une

chose, c’est que je ne sais rien » !Your

baby is ugly!!

Learn to talk

money!!

Product-!manager!

Designer! Usability"Expert!

Data Analyst! QA! Developer!

18"

La méthodologie Le testing en continu

Objectifs" Compréhension Analyse Préparation Exécution Enseignement Déploiement

Activités"

Analyse"des"données"

existantes"

Sondage"u9lisateurs"

Benchamrk"de"la"

concurrence"

Recueil"d‘idées"et"

d‘opinions"

"

Iden9fica9on"des"

leviers"

Visualisa9on"et"

priorisa9on"des"Idées"

de"test:"

Concep9on"du"test"

Mise"en"place"du"test"

"

Es9ma9on"de"

l’échan9llon"et"

de"la"durée"

Mise"en"pra9que"

Tes9ng"du"

tes9ng"

"

"

Collecte,"

traitement,"

interpréta9on"des"

tests"

StoryRtelling"

Tracking"con9nu"

Si"applicable,"

interna9onalisa9on"

""

"

Facteurs de succès"

Croisement"de"

méthodes"

Elabora9on"de"l‘aperçu"

général"du"test"en"

équipe"

Objec9fs"réalistes"

Alignement"de"

l’équipe"

Compréhension"

commune"de"l’objec9f"

Es9ma9on"précise"de"

la"charge"de"travail"

"

Suivi"

incondi9onnel"

du"revenu""

Environnement"

agile"

"

Communica9on"

des"résultats"

horizontalement"

et"ver9calement"

"

Environnement"agile"

Degré"d’achèvement"

«"Release"on"

demand"»"

Difficultés principales"

Préserver"objec9vité"et"

réalisme"

HIPPO‘s"(Highest"Paid"

Person’s"Opinion)"Ne"pas"

communiquer"les"

résultats"trop"

rapidement"

"

Facteurs"externes"

au"test"et"

imprédic9bles"

pouvant"affecter"

les"résultats"

Alignement"avec"la"

vision"longRterme"du"

produit"

Conserver"son"

rythme"de"croisière"

19"

Compréhension et analyse Comprendre / Analyser le parcours utilisateur

20"

Compréhension et analyse Usability lab

21"

Compréhension et analyse Sondage d’utilisateurs : « pourquoi n’achetez-vous pas notre offre premium ? »

Retour principal : « l’offre gratuite est suffisamment riche »

22"

Compréhension et analyse Benchmark de la concurrence

23"

Préparation Priorisation et planning

24"

Exécution S’inscrire dans une logique de feuille de route

In9tulé"

Hypothèse"

Objec9f(s)"

KPIs"

Ciblage"

URL":""

Original":""X%"

V1":""X%"

V2":""X%"

Durée" Es9mée"à"X"jours"

Date"de"

lancement"[Date]"

Formulation > Faire des réunions des sessions de brainstorming > Répertorier chaque idée

Priorisation > Barème de points > Effort graphique ? (1) > Durée du test ? (0,5) > Potentiel ROI ? (2) > Développement nécessaire ? (1) > Lié au release cycle ? (1) > Contraintes légales ? (1) > Approbation interne ? (0,5)

25"

Enseignements Bien analyser pour mieux communiquer…quelque soit le résultat !

26"

Enseignements Bien analyser pour mieux communiquer…quelque soit le résultat !

27"

Déploiement Agilité, déploiement du design optimisé et story-telling

28"

2."Prépara9on"

3."Exécu9on"

4."Enseignements"

5."Déploiement"

1."Compréhension"

Analyse"

La méthodologie Le testing en continu

29"

blog.optimizely.com community.optimizely.com help.optimizely.com learn.optimizely.com etienne@optimizely.com @eGautheron – @Optimizely +33 (0)1 81 97 97 23