Rangka Kerja Pengujian Kreatif untuk B2B CPL: Cara Menjalankan Ujian yang Benar-Benar Menggerakkan Angka

Saya telah mengaudit banyak akaun iklan B2B SaaS, dan kebanyakan "ujian kreatif" mengikuti skrip yang sama. Empat iklan dimasukkan ke dalam satu set iklan. Diperhatikan selama lima hari. Iklan dengan CPL terendah daripada 11 penukaran dipanggil pemenang. IC memberi taklimat kepada pereka grafik untuk "lebih banyak seperti yang itu." Tiga minggu kemudian CPL kembali ke tahap asal, tiada siapa tahu mengapa, dan pasukan sudah menyediakan kelompok empat iklan seterusnya.

Itu bukan ujian. Itu pemilihan pemenang berdasarkan gerak rasa pada saiz sampel yang tidak akan lulus kelas statistik. Tiada hipotesis, tiada minimum kesan yang boleh dikesan, tiada keputusan yang ditetapkan. Sebab CPL anda tidak bergerak bukan kerana kualiti kreatif. Ia kerana anda tidak pernah benar-benar menjalankan ujian sebenar terhadapnya.

Inilah sistem yang saya harap seseorang telah memberikan kepada saya apabila saya mula membeli iklan berbayar untuk B2B SaaS. Ambillah.

Perangkap Putaran 4 Iklan

Berikut adalah matematik yang tiada siapa di pihak IC jalankan sebelum melancarkan "ujian."

Anda bekerja dengan akaun B2B SaaS pada CPL $180 dan klien anda mahukan anda mencari peningkatan 15%. Untuk menyatakan peningkatan 15% dengan keyakinan statistik pada varians media sosial berbayar yang biasa, anda memerlukan kira-kira 30 penukaran per bahagian. Empat bahagian darab 30 penukaran darab CPL $180 adalah $21,600. Dengan bajet set iklan mingguan $4K, itu adalah ujian lima minggu. Kebanyakan IC menjalankannya selama lima hari.

Apa yang sebenarnya berlaku pada hari kelima dengan 11 penukaran setiap bahagian? "Pemenang" anda kebanyakannya adalah hingar. Jalankan semula empat iklan yang sama minggu depan dan iklan yang berbeza menang. Nisbah isyarat-kepada-hingar adalah dahsyat pada sampel kecil, dan penukaran B2B adalah jarang secara semulajadi. Anda bukan mengukur kreatif. Anda mengukur kebetulan.

Maka 80% ujian kreatif B2B tidak dapat mencapai kepentingan walaupun jika ia berjalan selamanya, kerana bajet per bahagian terlalu nipis dan ujian tidak pernah direka untuk itu. Memperbaiki ini bukan tentang kreatif yang lebih baik. Ia tentang ujian yang lebih kecil, lebih tepat dengan pelan yang sebenar.

Pengujian Berasaskan Hipotesis

Setiap ujian mendapat tiga perkara secara bertulis sebelum satu aset pun mendapat taklimat:

Hipotesis bernama. Bukan "mari kita lihat apa yang berfungsi." Sesuatu yang spesifik: "Cangkuk berasaskan kesakitan mengatasi cangkuk berasaskan hasil untuk pembeli IT kerana pembeli sudah merasai kesakitan (kegagalan audit, pendedahan pelanggaran) sebelum mereka mencari penyelesaian."
Metrik sasaran. Pilih satu. CPL adalah lalai, tetapi kadar penukaran laman pendaratan sering merupakan bacaan yang lebih bersih kerana ia mengasingkan kreatif daripada hingar bidaan sisi algoritma.
Kesan minimum yang boleh dikesan (MDE). Untuk bajet iklan berbayar B2B, 15-20% pada CPL adalah had minimum. Apa sahaja yang lebih kecil dan keperluan saiz sampel meledak melepasi apa yang akaun biasa boleh biayai.

Jika anda tidak dapat menulis hipotesis pada nota melekit, anda tidak mempunyai satu. Kembali dan tulisnya sebelum anda memberi taklimat kepada pereka grafik.

MDE memaksakan kejujuran. Peningkatan 5% kedengaran bagus sehingga anda menyedari anda memerlukan sekitar 270 penukaran setiap bahagian untuk mengesannya. Pada CPL $180 itu $48K setiap bahagian. Tiada siapa yang membiayai itu. Jadi anda menetapkan MDE pada 15%, menerima bahawa peningkatan kecil tidak kelihatan pada akaun anda, dan berhenti berpura-pura sebaliknya.

Rangka Kerja Pengujian Kreatif 3 Peringkat

Ujian bertindan. Anda tidak menguji "variasi cangkuk" secara rawak berbanding "variasi konsep" berbanding "variasi format" sekaligus. Anda menguji dari atas ke bawah, dalam peringkat, dan anda tidak turun satu peringkat sehingga peringkat di atasnya mempunyai pemenang yang jelas.

Peringkat 1: Konsep. Langkah besar. Berasaskan kesakitan berbanding berasaskan hasil berbanding berasaskan bukti sosial. Berasaskan ROI berbanding berasaskan tekanan rakan sebaya. Ini adalah mesej, bukan pelaksanaan. Ujian konsep memerlukan varians paling banyak untuk menang kerana pertaruhannya adalah tertinggi, tetapi ia juga menghasilkan pergerakan CPL terbesar apabila ia berjaya. Jangkakan delta CPL 20-40% pada pemenang konsep yang sebenar.

Peringkat 2: Format. Sebaik sahaja anda mempunyai konsep pemenang, uji bagaimana ia muncul. Statik berbanding carousel berbanding video UGC berbanding animasi. Kemenangan format biasanya peningkatan CPL 10-20% di atas kemenangan konsep.

Peringkat 3: Cangkuk. Hanya selepas konsep dan format dikunci. Uji tiga saat pertama video, atau baris pertama teks badan statik. Kemenangan cangkuk adalah 5-15%, tetapi ia bertindih dengan kemenangan di atas.

Kesilapan yang saya lihat setiap minggu: seorang IC menguji tiga cangkuk berbeza pada tiga konsep berbeza dalam tiga format berbeza dan menyebutnya "ujian kreatif." Itu sembilan pembolehubah dalam satu eksperimen dengan saiz sampel yang dibina untuk satu. Anda tidak mempelajari apa-apa. Kekalkan peringkat di atas stabil, ubah satu lapisan sahaja, dan keputusan menjadi jelas.

Membina Ujian B2B yang Sebenar

Berikut adalah pelan ujian contoh yang saya akan luluskan:

Hipotesis: Cangkuk berasaskan kesakitan mengatasi cangkuk berasaskan hasil untuk pembeli keselamatan IT di LinkedIn kerana pembeli keselamatan didorong oleh kesakitan, bukan oleh aspirasi. Metrik: CPL (sekunder: kadar penukaran laman pendaratan) MDE: 15% Bahagian: 2 (kawalan = pemenang berasaskan hasil semasa, pencabar = kesakitan-baru berasaskan) Saiz sampel diperlukan: sekitar 30 penukaran/bahagian CPL asas akaun: $180 Bajet: $5,400/bahagian = $10,800 jumlah Tempoh: 14 hari pada $385/hari per bahagian Khalayak: khalayak tersimpan CISO/Director of IT Security sedia ada, tanpa pengembangan Pencetus hentian: lihat peraturan keletihan dan ketidaklayakan di bawah Pemilik keputusan: saya, Jumaat selepas hari ke-14

Perhatikan apa yang hilang: tiada bahagian keempat atau kelima. Dua bahagian adalah jawapan yang betul untuk kebanyakan ujian B2B kerana bajet B2B tidak dapat membiayai empat dengan betul. Jika anda tergoda untuk menambah yang ketiga, buang ia dan jalankan sebagai ujian susulan berbanding bahagian mana yang menang pusingan ini. Ujian 2 bahagian berjujukan mengalahkan ujian 4 bahagian selari setiap kali pada bajet B2B.

Rancang bajet sebelum anda merancang visual. Jika anda tidak mampu 30 penukaran setiap bahagian pada CPL semasa anda, anda tidak mempunyai ujian. Anda mempunyai tekaan dengan langkah tambahan.

Diagnostik Keletihan Kreatif

Walaupun pemenang anda akan mati juga. Tugas bukan untuk mencari iklan yang abadi. Ia untuk mengesan kemerosotan awal dan bertukar sebelum CPL hanyut. Tiga isyarat, tiga diagnosis bernama, tiga pembetulan berbeza.

Isyarat 1: Kekerapan >4 dalam 7 hari. Khalayak anda telah melihat iklan ini terlalu kerap. CPL belum sentiasa bergerak, tetapi ia akan berlaku tidak lama lagi. Diagnosis: ketepuan khalayak. Pembetulan: kembangkan khalayak, bukan kreatif. Tambah lapisan khalayak serupa atau perlonggarkan penapis berasaskan jawatan. Kreatif yang sama, mata segar.

Isyarat 2: CTR turun 25%+ daripada garis asas minggu-1. Orang mengenali iklan dan berhenti mengklik. Cangkuk telah habis sebelum mesej pun habis. Diagnosis: keletihan mesej. Pembetulan: konsep yang sama, segarkan pelaksanaan kreatif. Tukar statik kepada carousel idea yang sama, atau tembak semula video dengan pembuka yang berbeza. Kekalkan hipotesis, ubah permukaan.

Isyarat 3: Hanyut CPL naik 20%+ dengan kadar penukaran laman pendaratan yang stabil. Pihak penukaran baik, jadi masalahnya adalah di hulu. Algoritma membayar lebih untuk klik yang sama kerana semua orang dalam khalayak sudah mengklik. Diagnosis: keletihan format. Pembetulan: tukar format. Jika anda telah menjalankan statik, hantar video UGC. Jika video, hantar carousel. Konsep yang sama, cangkuk yang sama, format baharu.

Anda sepatutnya menyemak tiga nombor ini setiap Isnin pada setiap kempen aktif. Lima minit kerja. Kos terlepas keletihan selama dua minggu biasanya $3-8K dalam perbelanjaan yang dibazirkan pada akaun B2B, jadi ia membuktikan nilainya ratusan kali ganda.

Peraturan Putaran Pemenang

Apabila pemenang muncul, naluri adalah untuk membunuh yang kalah dan menuangkan semua bajet ke dalam juara. Jangan.

Jalankan pembahagian 70/30: 70% kepada pemenang, 30% kepada bahagian terbaik kedua. Kekalkan kedua-duanya berfungsi. Dua sebab.

Pertama, pembakaran khalayak. Satu iklan yang dihidangkan pada bajet penuh membakar khalayak B2B dalam kira-kira 10 hari kerana khalayak adalah kecil (CISO di syarikat antara 200-2000 pekerja tidak terhad). Pembahagian 70/30 memanjangkan itu kepada kira-kira 18-22 hari kerana khalayak melihat variasi.

Kedua, anda memerlukan garis asas untuk ujian seterusnya. Apabila anda membawa masuk pencabar segar setiap 2 minggu, anda memerlukan kawalan yang stabil untuk dibandingkan. Pemenang 70% adalah kawalan anda. Tempat kedua 30% menjadi kawalan kedua atau diganti oleh pencabar baharu.

Putar masuk pencabar segar setiap 2 minggu. Kadang-kadang pencabar mengalahkan juara dan anda telah menemui pemenang baharu. Kadang-kadang ia kalah dan juara terus berjalan. Sama ada cara, anda tidak pernah menjalankan kreatif yang lapuk dan anda sentiasa mempunyai ujian langsung di pasaran.

Bila Menghentikan Ujian

Tiga peraturan. Hafal ini kerana godaan untuk menghentikan pada hari ke-5 kerana "sudah jelas" adalah nyata dan mengorbankan 30% daripada pembelajaran berguna anda.

Hentian ketidaklayakan hari ke-3. Jika satu bahagian adalah 2x lebih teruk daripada yang lain pada CTR dengan keyakinan statistik (dan ya, CTR boleh mencapai kepentingan dengan cepat kerana ia adalah metrik bervolum tinggi), bunuh yang kalah. Anda tidak mempelajari apa-apa baharu dan bajet lebih baik digunakan pada varian baharu. Ini adalah satu-satunya peraturan hentian awal. Ketidaklayakan CPL biasanya tidak dapat ditentukan seawal ini kerana penukaran terlalu jarang.

Hentian kekurangan kuasa hari ke-14. Jika tiada bahagian mencapai MDE menjelang hari ke-14, ujian itu kekurangan kuasa. Jangan panjangkan. Reka semula. Sama ada MDE tidak realistik, khalayak salah, bajet tipis, atau hipotesis lemah. Baiki reka bentuk dan jalankan ujian baharu. Mempanjangkan ujian yang rosak hampir tidak pernah memberi anda hasil yang bersih, ia hanya menangguhkan pembinaan semula.

Jangan sekali-kali menghentikan pada hari ke-5 kerana ia kelihatan jelas. Hari ke-5 adalah tepat apabila hingar kelihatan seperti isyarat dalam iklan berbayar B2B kerana isi padu penukaran adalah jarang. Bahagian yang "jelas menang" pada hari ke-5 bertukar dengan yang kalah pada hari ke-8 sekitar 40% daripada masa dalam pengalaman saya. Pegang garisan sehingga hari ke-14 kecuali hentian ketidaklayakan dicetuskan.

Menskalakan Pemenang

Anda telah menentukan pemenang. Sekarang skala.

Kesilapan di sini adalah menggandakan perbelanjaan dalam semalam dan menyaksikan CPL runtuh keesokan paginya. Algoritma tidak suka perubahan bajet yang tiba-tiba. Mereka menetapkan semula pembelajaran, membida semula terhadap hirisan khalayak yang berbeza, dan CPL anda hanyut naik semasa anda masih cuba memahami apa yang berlaku.

Had penskalaan Meta: +20%/hari maksimum. Itu sahaja. Jika anda pada $400/hari pada set iklan pemenang, hari 1 penskalaan adalah $480, hari 2 adalah $576, hari 3 adalah $691. Anda akan mencapai $1K/hari dalam lima hari. Perlahan adalah pantas.

Had penskalaan LinkedIn: +30%/hari maksimum. LinkedIn lebih sedikit pemaaf pada perubahan bajet kerana lelongannya lebih nipis dan algoritma bertindak balas lebih perlahan. Tetapi prinsip yang sama berlaku: beransur-ansur.

Hentian hanyut CPL. Perhatikan CPL setiap hari semasa penskalaan. Jika ia naik 25%+ daripada garis asas pra-penskalaan anda pada bila-bila masa, hentikan penskalaan. Anda telah melampaui khalayak anda. Dua laluan kembali: sama ada lebarkan khalayak (khalayak serupa, jawatan yang lebih luas, lapisan niat) dan sambung semula penskalaan pada saiz khalayak baharu, atau terima siling perbelanjaan semasa dan cari sudut kreatif baharu untuk membuka poket khalayak lain.

Penskalaan adalah tempat kebanyakan akaun B2B membakar keuntungan mereka. Anda menemui peningkatan CPL 20%, kemudian menggandakan perbelanjaan dalam seminggu dan memberikan kembali 30% kepada hanyut. Hasil bersih: lebih teruk daripada permulaan anda, ditambah kreatif yang terbakar. Hadkan peningkatan bertahap.

Memberi Taklimat kepada Pereka Grafik dengan Permintaan Sebenar

Bahagian terakhir, kerana ujian hanya berfungsi jika pereka grafik menghantar aset yang betul.

Taklimat yang buruk: "Kita perlukan kreatif baharu."

Taklimat yang baik, dan saya maksudkan salin templat ini:

Hipotesis: Cangkuk berasaskan hasil berprestasi rendah berbanding cangkuk berasaskan kesakitan untuk pembeli keselamatan di LinkedIn. Konsep: Berasaskan kesakitan, ditambat pada tiga titik kesakitan CISO: kegagalan audit, kos pelanggaran, tekanan lembaga. Format: Statik 1080x1080, 3 konsep (satu per titik kesakitan). Konteks khalayak: CISO dan Director of IT Security di syarikat 200-2000 pekerja. Nada: kanan, bukan main-main. Elemen yang diperlukan: Logo Rework di kanan bawah, CTA tunggal "See the platform" (bukan "Learn more"). Rujukan: lihat contoh pesaing yang dilampirkan (baik dan buruk) untuk penanda aras visual. Metrik kejayaan: mengatasi kawalan semasa sebanyak 15% CPL dalam 14 hari pada perbelanjaan $4K per bahagian. Tarikh akhir: Jumaat EOD. Aliran kelulusan: saya dahulu, kemudian ketua pereka grafik, kemudian hantar.

Taklimat itu memerlukan 10 minit untuk ditulis dan menjimatkan seminggu perbalahan. Pereka grafik tahu tepat-tepat apa yang sedang diuji, tahu apa yang dikira sebagai kemenangan, dan tahu tarikh akhir. Hipotesis ada dalam taklimat kerana pereka grafik menghasilkan kerja yang lebih baik apabila mereka tahu apa yang diukur. "Tiga statik berasaskan kesakitan" menghasilkan output yang berbeza daripada "jadikan yang pelanggaran itu benar-benar terasa seperti pelanggaran."

Simpan templat ini dalam Notion atau Google Doc. Gunakan semula untuk setiap ujian. Pasukan pereka grafik anda akan mula menulisnya bersama-sama anda selepas beberapa pusingan.

Apa yang Perlu Dibawa ke Hari Isnin

Jika anda menjalankan akaun iklan berbayar B2B SaaS pada hari Isnin pagi, berikut adalah set kerja:

Audit setiap "ujian" yang aktif. Mana-mana ujian tanpa hipotesis bertulis, tanpa MDE, tanpa tarikh keputusan: bunuh atau bina semula.
Pilih ujian sebenar seterusnya. Dua bahagian, hipotesis bernama, MDE 15%, bajet 30 penukaran/bahagian, tetingkap 14 hari.
Sediakan semakan keletihan hari Isnin pagi pada setiap kempen. Kekerapan, CTR minggu-ke-minggu, hanyut CPL. Lima minit.
Pindahkan setiap pemenang ke putaran 70/30 dengan bahagian tempat kedua. Kalendar pencabar segar setiap 2 minggu.
Hadkan penskalaan pada +20%/hari Meta, +30%/hari LinkedIn. Hentikan jika CPL hanyut 25%.
Tulis semula taklimat reka bentuk seterusnya menggunakan templat di atas.

Ujian yang tidak dapat mencapai MDE bukan ujian, ia adalah tekaan dengan langkah tambahan. Rancang saiz sampel sebelum anda merancang visual, dan CPL anda akan mula bergerak ke arah yang diharapkan klien anda.

Buku Panduan Pengurus Iklan Berbayar