
JAWABAN SINGKAT
Atribusi memberikan perintah kepada pencipta; inkrementalitas memperkirakan apa yang tidak akan terjadi tanpa kampanye. Gunakan kontrol acak, pemisahan geografis, batas waktu penonton, atau garis waktu yang kredibel. Sebelum peluncuran, tentukan metrik utama, penetapan, durasi, efek minimum yang dapat dideteksi, dan aturan penghentian. Hindari mengubah anggaran, pemirsa, atau ujian tengah materi iklan. Jika sampel berukuran kecil, laporkan ketidakpastian daripada peningkatan pasti.
Mulailah dengan satu hipotesis eksplisit
Gunakan pernyataan seperti “konten pembuat konten meningkatkan tingkat pembelian pelanggan baru setidaknya 8% di pasar sasaran”, daripada “lihat apakah ini berhasil”. Pilih satu metrik utama dan gunakan metrik lainnya untuk diagnostik.
Unitnya dapat berupa pengguna, wilayah, atau periode waktu. Pilih berdasarkan data, paparan silang, dan pengoperasian, bukan berdasarkan kenyamanan saja.
Jaga agar pengobatan dan pengendalian tetap sebanding
Usahakan harga, landing page, stok, promosi dan media lainnya semirip mungkin. Rekam paparan silang ketika konten pembuat konten menyebar secara alami ke wilayah kontrol.
Eksperimen Google Ads membagi traffic antara kampanye asli dan kampanye pengujian serta memperingatkan bahwa perubahan di tengah pengujian mempersulit interpretasi. Eksperimen pembuat konten memerlukan disiplin yang sama.
Hitung konversi tambahan
Tingkat tambahan sama dengan tingkat konversi pengobatan dikurangi tingkat konversi kontrol. Perkirakan konversi tambahan dengan mengalikan selisihnya dengan populasi perlakuan, lalu hitung nilai tambahan dengan kontribusi atau pendapatan bersih.
Jika 20.000 pengguna pengobatan melakukan konversi sebesar 4,5% dan 20.000 kontrol sebesar 4,0%, peningkatan 0,5 poin berarti sekitar 100 pesanan tambahan. Signifikansi statistik masih memerlukan analisis yang tepat.
Sertakan biaya peluang dan kelambatan konversi
Ketidaksepakatan mungkin mengorbankan penjualan jangka pendek. Produk yang bernilai tinggi atau membutuhkan waktu lama juga memerlukan waktu untuk dikonversi.
Panduan resmi Peningkatan Konversi mencatat bahwa beberapa penelitian memerlukan anggaran dan konversi yang besar dan biasanya merekomendasikan waktu lebih dari 14 hari. Sebuah kampanye kecil tidak boleh menuntut ketepatan yang sama; tes geo terarah dapat dilaporkan dengan keterbatasan.
Tentukan satuan percobaan sebelum diangkat
Eksperimen Google Ads menguji perubahan kampanye dan merekomendasikan satu variabel dalam satu waktu, sedangkan Conversion Lift menggunakan perbedaan konversi antara perlakuan dan kontrol untuk memperkirakan inkrementalitas. Kampanye kreator dapat meminjam struktur tersebut, namun unit eksperimennya—pasar, audiens, atau jangka waktu—harus ditetapkan sebelum peluncuran, bukan dipilih setelah hasil.
Jika 50.000 orang dalam pengobatan menghasilkan 1.400 konversi, angkanya adalah 2,8%; 1.100 konversi di antara 50.000 kontrol menghasilkan 2,2%. Peningkatan absolut adalah 0,6 poin persentase, peningkatan relatif sekitar 27,3%, dan konversi tambahan skenario adalah 300. Perhitungan sederhana ini tidak menghasilkan signifikansi statistik; kontaminasi, promosi paralel dan paparan lintas kelompok masih perlu ditinjau.
Catatan desain pengujian inkrementalitas
Bekukan desain dan pengecualian sebelum peluncuran.
| Barang | Rekor pra-peluncuran | Pemeriksaan pasca peluncuran |
|---|---|---|
| Satuan percobaan | Pasar / penonton / waktu | Kontaminasi |
| Metrik utama | Satu definisi konversi | Kelengkapan data |
| Jendela observasi | Mulai, akhiri, jeda | Aktivitas paralel |
| Hentikan aturan | Sampel atau ambang batas waktu | Mengintip lebih awal |
ALAT PRAKTIS
Kalkulator peningkatan kontrol pengobatan
Hitung peningkatan absolut, peningkatan relatif, dan inkrementalitas skenario; ini bukan tes signifikansi.
Sumber dan bacaan lebih lanjut
Halaman eksternal dapat berubah. Periksa kembali aturan platform, kontrak, dan hukum setempat sebelum peluncuran.