Modules

Hy-Performance

Forfait : Hyper

Savoir quelles actions marketing rapportent vraiment, lesquelles perdent, et lesquelles ne se mesurent pas encore.

Problèmes business

  • Vos campagnes ont un groupe témoin, mais personne ne sait dire lesquelles ont payé leur budget.
  • Un tableau agrégé affiche un uplift flatteur que les actions, une à une, ne confirment pas.
  • Vous devez trancher entre l'action en place et une nouvelle, sans pouvoir laisser de client sans contact.

Problèmes académiques

  • Enseigner l'A/B test avec ses vrais pièges, multiplicité, malédiction du gagnant, paradoxe de Simpson.
  • Évaluer un traitement en essai clinique, avec ses termes, ICER et NNT compris.

Méthodes et garanties

  • Chaque action passe des seuils d'estimabilité et de précision avant qu'un uplift ou un ROI soit retenu.
  • Correction de Benjamini-Hochberg optionnelle sur toute la famille de tests.
  • Test du chi² par action contre un ratio cible/témoin déclaré, pour repérer un témoin contaminé.
  • Uplifts agrégés standardisés sur une seule population, jamais recalculés à partir des totaux.

Voir d'un coup d'œil où va l'argent et ce qu'il rapporte

Run Performance ouvre directement la vue Synthesis, qui résume une période en sept graphiques. Dans Budget × Return, la largeur d'une barre est la part du budget, sa hauteur le rendement par unité engagée. L'aire de la barre vaut donc ce que la maille a rapporté : la taille et le rendement se lisent ensemble, sans se contredire.

La maille se choisit en un clic, de la stratégie au niveau le plus fin. Aucun chiffre n'est calculé pour l'occasion : tout ce que montre Synthesis se retrouve dans le tableau Aggregates.

Vue Synthesis : barres Budget × Return et Conversion uplift par maille, puis part du budget mesurable et part rentable
Synthesis, maille Level 2 : budget, rendement et uplift de conversion, puis la part mesurable et la part qui a payé.

Séparer les actions rentables du bruit

Une action n'obtient un uplift ou un ROI qu'après avoir passé des contrôles distincts : assez de conversions pour estimer un taux (Analyz Min Conv), une erreur-type relative sous un plafond (Max Relative Prec (%)). Sinon elle est marquée NA, et son budget sort des indicateurs analysables au lieu d'y être compté en silence.

Un NA n'est pas une impasse. Il est re-testé sous une augmentation simulée du volume (Vol Increase Factor) : certaines actions sont simplement à relancer avec plus de clients.

Tuile Budget mix by ROI flag : pour chaque maille, le budget réparti entre rentable, mesuré et perdu, et non mesurable
Budget mix by ROI flag : vert, le budget qui a payé ; rouge, mesuré et perdu ; gris, jamais mesurable.

Repérer les vrais gagnants dans la scène 3D

Le scénario Hy-Perf — winners vs noise porte la même lecture dans la scène 3D. Chaque point est une action : sa couleur dit si elle gagne de l'argent une fois son budget déduit, sa taille compte ses conversions, et les actions imprécises s'estompent. L'ellipsoïde enveloppe la masse typique ; les vrais gagnants sont les points verts bien nets qui en sortent.

Scène 3D Uplift Signal : actions en vert (gain net), rouge (perte nette) ou gris (non conclu), taille selon les conversions, ellipsoïde ±2σ
Uplift Signal : couleur = gain ou perte nette, taille = conversions, transparence = imprécision ; l'ellipsoïde ±2σ enveloppe la masse typique.

Des chiffres agrégés qui ne mentent pas

Recalculer un uplift à partir des totaux d'un portefeuille donne un chiffre faux dès que la taille des témoins varie d'une cellule à l'autre. L'écart peut aller jusqu'à inverser le signe : c'est le paradoxe de Simpson. Hy-Performance standardise donc chaque uplift agrégé sur une seule population, choisie par Weight Base (cibles, témoins ou les deux).

Les autres garde-fous restent à portée de main :

  • Multi-Test Correction sur BH-FDR contrôle la part de fausses découvertes quand on crible un large catalogue d'actions ;
  • Expected Ratio (T/C) alerte quand le partage cible/témoin observé s'écarte du design ;
  • le lien Warnings du tableau Aggregates met le ROI filtré par la significativité en regard du ROI sans filtre, la vérité se situant généralement entre les deux.

Départager champion et challenger

Une nouvelle action se compare à l'action en place de deux façons. Soit les deux sont les deux bras d'un même test, quand chaque client doit forcément recevoir quelque chose. Soit chacune a son propre témoin sans contact, et la vue Strategy Duels publie l'écart entre les deux stratégies en volume, en montant et en ROI par client, avec son test. Une marge de non-infériorité permet de conclure qu'une option moins chère ne fait pas moins bien.

Le même calcul, en vocabulaire clinique

Le réglage Vocabulary bascule l'affichage et l'export de Marketing à Clinical : l'uplift devient l'ATT, le ROI devient le NMB. Les chiffres ne changent pas, seuls les noms changent. Le tableau Aggregates donne aussi l'ICER, coût par unité de résultat incrémental, et le NNT, nombre de personnes à traiter pour obtenir un résultat de plus.

Essayez-le sur vos données

Tout s’exécute dans votre navigateur : vos données ne le quittent pas.

Ouvrir Tétrachore

Mis à jour le 1 novembre 2026