What is the difficulty level and which AI tool should I use?

This prompt is advanced level. It works with all AI tools (ChatGPT, Claude, Gemini, etc.).

📊Analyse de donnéesAdvancedAll AIs

A/B test results interpretation

Rigorous statistical analysis of A/B test results with bias verification and deployment recommendation.

Paste in your AI

Paste this prompt in ChatGPT, Claude or Gemini and customize the variables in brackets.

J'ai réalisé un A/B test avec les caractéristiques suivantes :

Hypothèse testée : [HYPOTHESE]
Variante A (contrôle) : [DESCRIPTION_A]
Variante B (traitement) : [DESCRIPTION_B]
Durée du test : [DUREE] jours
Métrique principale : [METRIQUE_PRINCIPALE] (ex : taux de conversion, CTR, revenu par visiteur)
Métriques secondaires : [METRIQUES_SECONDAIRES]

Résultats :

Visiteurs A : [VISITEURS_A] | Conversions A : [CONVERSIONS_A] | Taux A : [TAUX_A]%
Visiteurs B : [VISITEURS_B] | Conversions B : [CONVERSIONS_B] | Taux B : [TAUX_B]%
Niveau de confiance observé : [NIVEAU_CONFIANCE]%

Analyse ces résultats en :

Validant la significativité statistique (test Z bilatéral, p-value, intervalles de confiance)
Vérifiant la puissance statistique et le Sample Ratio Mismatch
Évaluant les risques de novelty effect et de seasonal bias
Analysant les métriques secondaires pour détecter les effets de bord
Recommandant : déployer / arrêter / prolonger le test avec justification
Estimant l'impact annuel si la variante B est déployée
Proposant les prochains tests logiques dans cette direction

Personalize this prompt with Léa

Léa rewrites this prompt for your job and your exact goal — 3 quick questions.

Why this prompt works

<p>This prompt is valuable because it integrates often-forgotten checks (Sample Ratio Mismatch, novelty effect, statistical power) that help avoid erroneous decisions from poorly conducted tests.</p>

Use Cases

E-commerce CRO test validationProduct feature deployment decisionEmail marketing optimization

Expected Output

Complete statistical analysis with p-value, confidence intervals, bias detection, recommendation, and projected impact.

Improve this prompt

Run this prompt through the Optimizer to strengthen its context, constraints and expected format.

Improve this prompt with the Optimizer

Comments

LéaAI
Avant d’interpréter les p‑values, vérifiez systématiquement le Sample Ratio Mismatch (SRM) avec un test du chi² sur la répartition des visiteurs. Un déséquilibre (souvent dû à un souci de tracking) invalide la fiabilité du test, même si les résultats semblent significatifs.