
LA RÉPONSE COURTE
L’attribution rattache les commandes aux créateurs ; l’incrémentalité estime ce qui ne se serait pas produit sans la campagne. Utilisez des groupes témoins randomisés, une répartition géographique, des groupes d’audience témoins ou une référence temporelle crédible. Avant le lancement, définissez l’indicateur principal, l’affectation des groupes, la durée, l’effet minimal détectable et la règle d’arrêt. Évitez de modifier le budget, l’audience ou les créations publicitaires pendant le test. Lorsque les échantillons sont petits, faites état de l’incertitude plutôt que d’affirmer une hausse certaine.
Partir d’une hypothèse explicite
Utilisez une formulation telle que « le contenu des créateurs augmente d’au moins 8% le taux d’achat des nouveaux clients sur le marché cible », plutôt que « voir si cela fonctionne ». Choisissez un indicateur principal et utilisez les autres à des fins de diagnostic.
L’unité peut être constituée d’utilisateurs, de régions ou de périodes. Choisissez en fonction des données, de l’exposition croisée et des opérations, plutôt que de la seule facilité de mise en œuvre.
Maintenez la comparabilité entre le groupe exposé et le groupe témoin
Maintenez autant que possible des prix, pages de destination, stocks, promotions et autres dispositifs médias similaires. Consignez l’exposition croisée lorsque les contenus des créateurs se diffusent naturellement dans les régions témoins.
Les tests Google Ads répartissent le trafic entre les campagnes initiales et les campagnes de test et précisent que les modifications en cours de test compliquent l’interprétation. Les expérimentations avec des créateurs exigent la même rigueur.
Calculer les conversions incrémentales
Le taux incrémental est égal au taux de conversion du groupe test moins le taux de conversion du groupe témoin. Estimez les conversions incrémentales en multipliant cette différence par la population du groupe test, puis calculez la valeur incrémentale à partir de la contribution nette ou du chiffre d’affaires.
Si 20,000 utilisateurs du groupe test convertissent à 4.5% et 20,000 utilisateurs du groupe témoin à 4.0%, la hausse de 0.5 point correspond à environ 100 commandes supplémentaires. La significativité statistique nécessite néanmoins une analyse appropriée.
Inclure le coût d’opportunité et le délai de conversion
Un groupe témoin non exposé peut entraîner un manque à gagner à court terme. Les produits de grande valeur ou nécessitant une longue réflexion avant achat ont également besoin de temps pour générer des conversions.
La documentation officielle de Conversion Lift indique que certaines études nécessitent un budget et un volume de conversions importants, et recommande généralement une durée supérieure à 14 jours. Une petite campagne ne doit pas revendiquer une précision équivalente ; un test géographique donnant une indication de tendance peut être présenté en explicitant ses limites.
Définissez l’unité expérimentale avant de mesurer l’effet incrémental
Les tests Google Ads évaluent les modifications apportées aux campagnes et recommandent de tester une seule variable à la fois, tandis que Conversion Lift utilise la différence de conversions entre le groupe exposé et le groupe témoin pour estimer l’incrémentalité. Les campagnes avec des créateurs peuvent reprendre cette structure, mais l’unité expérimentale — marché, audience ou période — doit être fixée avant le lancement plutôt que choisie après les résultats.
Si 50,000 personnes du groupe exposé génèrent 1,400 conversions, le taux est de 2.8% ; 1,100 conversions parmi 50,000 personnes du groupe témoin donnent 2.2%. Le gain absolu est de 0.6 point de pourcentage, le gain relatif d’environ 27.3% et les conversions incrémentales du scénario s’élèvent à 300. Ce calcul simple n’établit pas de significativité statistique ; la contamination, les promotions parallèles et l’exposition entre groupes doivent encore être examinées.
Fiche de conception du test d’incrémentalité
Figez le protocole et les exclusions avant le lancement.
| Article | Fiche avant lancement | Vérification après lancement |
|---|---|---|
| Unité expérimentale | Marché / audience / période | Contamination |
| Indicateur principal | Une définition unique de la conversion | Exhaustivité des données |
| Période d’observation | Début, fin, décalage | Activité parallèle |
| Règle d’arrêt | Seuil d’échantillonnage ou de durée | Consultation prématurée des résultats |
OUTIL PRATIQUE
Calculateur de gain entre groupe exposé et groupe témoin
Calculer la hausse absolue, la hausse relative et l’incrémentalité du scénario ; il ne s’agit pas d’un test de significativité.
Sources et lectures complémentaires
Les pages externes peuvent changer. Vérifiez à nouveau les règles de la plateforme, les contrats et la législation locale avant de lancer.