Épisode 5

Le test

Essayer n'est pas tester. Mira construit la plus petite comparaison honnête qui existe — et tient immobile tout ce qu'elle ne veut pas mesurer.

6 min de lecture

Le comité était unanime : essayer.

Essayer n’est pas la même chose que tester, et tout l’épisode tient dans cette différence.

La version simple donne ceci. Le samedi, Mira va à la pelouse du ponton, vend bien, remballe et reste là-bas. Ce qu’elle a ensuite, c’est une bonne journée à un nouvel endroit. Ce qu’elle n’a pas, c’est une comparaison. Samedi n’est pas lundi, le soleil était un autre soleil, et le souvenir de la semaine dernière n’est pas une mesure. C’était l’épisode 3.

Dessin : deux enfants se tiennent à des endroits différents du bord du lac, reliés par un trait en pointillés portant deux symboles de calendrier ; l'endroit au premier plan est marqué d'une tache couleur ambre.
Quatre jours, deux places, une variable : A fait 13 glaces par heure, B neuf.

Deux lettres

Elle dessine le lac sur une feuille et y inscrit deux lettres. A, c’est la pelouse au ponton. B, c’est son chemin de rive.

Pas « la nouvelle » et « l’ancienne ». Pas « la meilleure » et « la mienne ». Des noms qui contiennent déjà le résultat, elle en a assez entendu dans l’épisode 3.

Quatre jours, une variable

Lundi et mercredi, elle est à B. Mardi et jeudi, à A.

Pourquoi pas une semaine ici et une semaine là-bas ? Parce qu’alors la météo déménage avec elle. En alternance, les deux places tombent dans la même fenêtre météo, et un jour de canicule les touche toutes les deux.

Pourquoi pas le week-end ? Parce que le samedi est une autre bête. La comparaison doit courir entre les places, pas entre samedi et mardi.

Tout le reste, elle le tient immobile. Les mêmes six heures, de onze heures à dix-sept heures. Le même prix. La même glacière. Elle seule, car la camarade est en congé cette semaine-là : deux changements à la fois donnent après coup deux explications et aucune preuve.

Pas de pancarte, pas de deuxième parfum, pas de journée rallongée. Tout cela figure sur sa liste d’idées. Tout cela attend.

Ce qu’elle monte là est un Un test A/B compare deux variantes toutes choses égales par ailleurs — deux emplacements, deux jours de la semaine, un résultat. Sans cette comparaison, « celui-là marche mieux » reste une impression. fiche complète sous la plus petite forme honnête qui existe.

B n’est pas la partie ennuyeuse. B est la partie qui lui dit si la semaine vaut quelque chose. Si tout s’effondre aux deux endroits, c’était la semaine et non la place. Une comparaison a toujours besoin du côté qui ne change pas. Dans les mots de Mira : « B, c’est l’endroit où je sais ce qui est normal. »

Ce qu’elle compte, ce sont les glaces par heure, chaque jour de test. Pas le bénéfice à la fin du mois. Le premier, elle peut encore l’infléchir ; le second, elle ne peut plus qu’en prendre acte — Un indicateur avancé vous dit tôt où vous allez — les glaces vendues par heure, dès la matinée. Un indicateur retardé ne fait que le confirmer après coup — le bénéfice du soir. Ne mesurez que le second, et vous apprenez le problème quand il est trop tard pour le corriger. fiche complète , c’est ainsi que le manuel appelle ce couple.

Les chiffres

Lundi à B : 51 glaces. Mercredi à B : 57. Ensemble, 108 glaces en douze heures, donc neuf par heure.

Mardi à A : 72 glaces. Jeudi à A : 84. Ensemble, 156 glaces en douze heures, donc treize par heure.

Quatre glaces d’écart par heure. En argent : 6,50 € de marge dans l’heure à A, 4,50 € à B.

Posez maintenant la ligne de l’épisode 4 à côté. Elle est à 5 €. À son ancienne place, une heure achetée n’aurait pas été rentable après ces quatre jours, aussi bien que vende la camarade. À A, elle l’est : il reste 1,50 € par heure achetée.

La question de l’épisode 2 n’a jamais été de savoir si la nouvelle était moins bonne. Elle était de savoir si le stand était au bon endroit.

Au passage, le test ne lui a coûté aucune journée de vente. Elle a vendu les quatre jours, 264 glaces, 132 € de marge. Elle a seulement noté en plus où elle se tenait.

Les glaces et les noyades

Deux courbes montent ensemble chaque été : les ventes de glaces et le nombre de noyades. Le lien est réel, il est mesurable, et il figure dans tous les cours d’introduction. Est-ce que la glace provoque la noyade ? Bien sûr que non. Il fait chaud. La chaleur pousse les deux — plus de glaces, plus de gens dans l’eau.

Mira a le droit de se réjouir un instant : sa propre gamme est l’exemple canonique de la discipline. Précisément à la page où l’on explique comment on se trompe.

Le troisième facteur caché s’appelle un Un facteur de confusion est une cause cachée qui fait bouger les deux côtés d'une comparaison — les ventes de glaces et les noyades montent ensemble, non parce que l'une provoque l'autre, mais parce que la chaleur pousse les deux. Ratez le facteur de confusion, et vous prenez une corrélation pour une cause. fiche complète , et il est assis dans sa semaine de test aussi. Et si mardi et jeudi avaient simplement été plus chauds que lundi et mercredi ? Alors elle n’a pas comparé deux places, mais deux météos.

Elle ne peut pas l’exclure. L’alternance tous les deux jours le rend moins probable, car la météo aurait dû conspirer deux fois dans le même sens. Désormais, elle note aussi la température ; cela coûte une ligne par jour.

Et elle fait la chose la moins chère qu’on puisse faire d’un soupçon : elle refait la semaine avec les jours inversés. La place A le lundi et le mercredi, la place B le mardi et le jeudi. Résultat : A arrive à douze, B à neuf. Ce n’était pas le jour de la semaine.

Quatre glaces d’écart sur neuf, cela fait un bon quarante pour cent. Un écart de cette taille supporte quatre jours. Si cela avait été 10,2 contre 9,8, elle n’aurait rien eu en main après quatre jours — et elle devrait le dire. Les petits écarts demandent beaucoup de jours, les grands en demandent peu. Qui retourne cette règle mesure jusqu’à ce que le résultat lui convienne.

Maintenant, retournez le miroir. Votre indicateur le plus important est monté après que vous avez changé quelque chose. Qu’est-ce qui tournait en même temps ?

Au comité de jouer

Mira déménage. Elle a une place, une ligne et un procédé qui lui permettra la prochaine fois de retrouver ce qu’elle ne sait pas encore.

Une question reste ouverte : elle ne sait pas si deux vendeuses à A restent ensemble au-dessus de dix glaces par heure. Deux personnes à un même stand se prennent peut-être la file l’une à l’autre. C’est le prochain test, et cette fois elle sait à quoi il ressemble.

Que devrait-elle améliorer ensuite ?

Notez vos idées avant de lire la suite. Dans l’épisode 6, dix d’entre elles sont sur la table — et elle a le temps pour six.