La guerre entre pros test A/B et pros test utilisateur

Ils sont de moins en moins nombreux ceux qui contestent l’importance de tester de nouvelles idées d’optimisation de sites web avec utilisateurs réels et en utilisant des outils tels que le test A/B et le test multi-variés.

Cependant on sent une fracture de plus en plus importante entre les adeptes des tests utilisateurs et ceux des tests A/B. Et étonnement, au lieu d’utiliser la synergie de ces 2 méthodes, on se retrouve plus en présence de groupes distincts adoptant une attitude défensive vis-à-vis les uns des autres.

 

Une relation difficile

Voilà ce que l’on peut entendre des aficionados des tests A/B sur les tests utilisateurs :

  • « Les tests utilisateurs ne sont pas statistiquement significatifs en raison de la petite taille des échantillons »
  • « Les participants ne se comportent pas naturellement lorsqu’il y a des caméras pointées sur eux »
  • « C’est trop cher vu qu’il faut rémunérer les participants »

De l’autre côté du ring les pros tests utilisateurs :

  • « Les hypothèses pour mettre en place des test A/B ne reposent sur rien de concret »
  • « On ne peut pas obtenir de résultats intéressants si le trafic n’est pas encore au rendez-vous »
  • « On ne peut pas décemment mettre en place de variantes s’il n’y a pas de concept d’utilisabilité sous-jacents »

 

Une question de vocabulaire

Or une des raisons pour laquelle, ces groupes n’arrivent pas à se mettre d’accord est qu’ils n’utilisent
pas le même langage. Ils parlent souvent de la même chose mais ont une façon différente de l’exprimer.
Cette barrière de langue utilisée renforce leurs non compatibilités.

Ci-dessous un petit dictionnaire « test utilisateur-test A/B »

  • utilisateur = visiteur
  • recommandation = hypothèse
  • persona = segment
  • expérience utilisateur = taux de conversion
  • criticité du problème = impact financier

 

Conclusion

Les pros tests utilisateurs et A/B testing peuvent et doivent travailler ensembles.

Les deux disciplines sont totalement complémentaires quand les protagonistes des deux camps acceptent les limitations de leurs propres outils et les forces des autres outils.

Source

econsultancy.com

Posté le par Florian d'Appili dans Tests utilisateurs Commenter