Metrik Data Analyst: Masa untuk Mendapat Cerapan, Impak Keputusan, Penggunaan Papan Pemuka

Pukul 4:47 petang pada hari Khamis. DM Slack tiba dari VP Pemasaran: "tarik sekejap?" Anda mengeluh, berpaling dari model LTV yang anda telah bergulat selama dua hari, dan mengisar nombor-nombor itu menjelang pukul 6:15 petang. Dia menghantar jempol ke atas untuk mesej itu. Anda menutup laptop.

Enam bulan kemudian, pengurus anda duduk di hadapan anda dalam sesi 1:1 dan berkata, "Saya mahu mendorong kenaikan pangkat anda, tetapi saya perlukan sesuatu yang lebih konkrit daripada 'dia sibuk dan orang ramai menyukainya.' Apa yang sebenarnya anda hantar suku tahun ini?"

Anda membuka Jira. Anda mengira 87 tiket yang ditutup. Anda berdua merenung skrin. Tiada seorang pun daripada anda berasa baik tentang perkara itu.

Beginilah kerjaya data analyst terhenti. Bukan kerana kerja itu buruk, tetapi kerana tiada siapa dalam pasukan yang mengukur rupa kerja analyst yang baik sebenarnya. "Kami sibuk" menjadi KPI de facto. Bilangan tiket menjadi proksi untuk impak. Dan kemudian jalur gaji anda berhenti bergerak.

Saya menjejaki lima metrik ini pada diri sendiri selama satu suku tahun penuh sebelum ulasan terakhir saya. Perbualan yang lahir daripadanya adalah perbezaan antara tawaran $95 ribu dan tawaran $145 ribu. Tajuk kerja yang sama. Perbendaharaan kata yang berbeza.

Mengapa Pengukuran Diri adalah Tuas Kenaikan Pangkat Sebenar

Pengurus anda mahu memperjuangkan anda. Kebanyakan Ketua BI yang pernah saya bekerja bersamanya benar-benar berbuat demikian. Masalahnya ialah mereka memasuki jawatankuasa ganjaran atau mesyuarat kalibrasi dengan lapan pengurus lain, semua membuat kes untuk orang mereka, dan bahasa itu mesti kuantitatif. "Camellia menutup banyak tiket dan pihak berkepentingan menyukainya" kalah kepada "Marcus mengurangkan ralat ramalan peralihan pelanggan dari 18% ke 6% dan modelnya kini ada dalam paparan lembaga pengarah."

Anda tidak boleh menyerahkan ini kepada pengurus anda. Anda perlu masuk dengan nombor yang sudah tersedia. Lima daripadanya, sebaik-baiknya pada satu slaid, sebaik-baiknya dengan garis aliran.

Inilah perangkap yang kebanyakan analyst terlepas: empat daripada lima metrik di bawah adalah perlu tetapi tidak mencukupi. Kelajuan, penggunaan, kepuasan, kebersihan tunggakan semuanya penting, dan semuanya adalah ambang minimum. Yang bertambah, yang memisahkan anda daripada analyst yang digantikan oleh pelengkap automatik SQL yang lebih baik, adalah impak keputusan. Analyst yang pantas dan banyak digunakan tetapi tidak pernah menggerakkan keputusan adalah boleh diganti. Analyst yang menggerakkan tiga keputusan setiap suku tahun tidak.

Jejak semuanya. Bawa yang bertambah.

Metrik 1: Masa untuk Mendapat Cerapan (Time-to-Insight)

Definisi: Jam mula apabila permintaan tiba dalam barisan anda. Ia berhenti apabila pemohon mempunyai jawapan dalam bentuk yang boleh ditindaklanjuti. Bukan apabila anda menghantar papan pemuka. Apabila mereka memahami jawapan itu.

Sasaran: Median di bawah 48 jam. P90 di bawah 5 hari. P99 di bawah 10 hari.

Cara menjejak: Helaian Google dengan lima lajur sudah mencukupi. request_id, requester, received_at, delivered_at, business_question. Jangan cuba membina ini dalam Jira. Jira menjejak tiket, bukan cerapan, dan cap masanya hanyut kerana tiket dibuka semula dan melantun. Helaian rata yang anda isi sekali sehari, mengambil masa 90 saat.

Kali pertama saya mengukur ini, median saya ialah 6.3 hari. Saya fikir saya pantas. Saya tidak. Sebabnya terasa pantas ialah kerana saya sentiasa mengerjakan sesuatu, tetapi barisan kerja dalam proses mengandungi 11 item, dan sebarang permintaan individu sedang menunggu dalam barisan di belakang dua hari pertukaran konteks.

Sebaik sahaja anda boleh melihat mediannya, anda boleh menggerakkannya. Tiga perkara menggerakkan masa untuk mendapat cerapan lebih daripada apa-apa lain:

1. Borang permohonan (intake form) yang sebenar (walaupun aliran kerja Slack) yang memaksa pemohon untuk menulis soalan perniagaan dalam satu ayat. Jika mereka tidak boleh, anda menolaknya kembali. Anda akan terkejut betapa banyak "tarikan segera" yang hilang apabila seseorang perlu menyatakan keputusan apa yang mereka buat.
2. Had WIP tiga analisis serentak. Apa-apa melebihi itu masuk ke tunggakan dengan tarikh jangkaan yang telus.
3. Templat untuk lima jenis permintaan yang paling biasa: perbezaan corong, pengekalan kohort, semakan atribusi saluran, penyegaran papan pemuka eksekutif, kiraan segmen ad hoc. Templat menurunkan tarikan 6 jam ke 45 minit.

Metrik 2: Impak Keputusan

Definisi: Peratusan analisis yang anda hantar yang mengubah keputusan. Bukan "memaklumkan" keputusan. Mengubahnya. Pihak berkepentingan melakukan sesuatu yang berbeza daripada apa yang mereka akan lakukan tanpa kehadiran kerja anda.

Sasaran: 25% dalam tahun pertama anda sebagai IC. 40% ke atas sebagai Senior. Di bawah 15% bermakna anda adalah pelayan pertanyaan, bukan analyst.

Cara menjejak: Audit suku tahunan. Anda melihat kembali setiap analisis yang anda hantar dan anda bertanya kepada pemohon tiga soalan, secara bersemuka atau dalam panggilan 15 minit:

1. "Keputusan apa yang analisis ini menyumbang?"
2. "Apa yang anda akan putuskan tanpa analisis saya?"
3. "Apa yang sebenarnya anda putuskan, dan adakah ia berbeza?"

Tiga soalan. Lima minit setiap pemohon. Jika jawapan kepada soalan 3 ialah "kami melakukan perkara yang sama yang kami akan lakukan pun," itu adalah sifar. Tidak kira betapa bersih SQL-nya.

Kali pertama saya menjalankan audit ini, kadar impak keputusan saya ialah 11%. Sebelas peratus. Saya telah berada di syarikat itu selama 14 bulan dan lebih kurang sembilan daripada sepuluh perkara yang saya hantar tidak mengubah satu tingkah laku pun. Papan pemuka dibina, slaid dibentangkan, dan semua orang meneruskan minggu mereka tanpa perubahan.

Nombor itu adalah nombor terpenting dalam kerjaya anda. Jika ia di bawah 15%, soalannya bukan "bagaimana saya menghantar lebih banyak analisis?" Soalannya ialah "mengapa saya menghantar perkara yang tidak penting?" Biasanya salah satu daripada tiga jawapan:

• Anda menjawab soalan yang ditanya, bukan soalan yang dimaksudkan. Pihak berkepentingan tidak selalu tahu cara menyatakan apa yang mereka cuba putuskan. Tugas anda adalah menolak kembali semasa pengambilan.
• Anda menghantar selepas tetingkap keputusan ditutup. Analisis pengekalan yang tiba minggu selepas dokumen strategi dimuktamadkan adalah hiasan.
• Anda menyampaikan data, bukan cadangan. "Inilah nombor, anda yang putuskan" terasa selamat. Ia juga melepaskan tanggungjawab tugas analyst.

Bahagian yang bertambah: setiap analisis yang menggerakkan keputusan memberi anda hak untuk menolak lebih keras pada pengambilan seterusnya. Selepas tiga atau empat kemenangan, pemohon mula datang kepada anda dengan "saya cuba memutuskan antara X dan Y, apa pendapat anda?" dan bukannya "boleh anda tarik nombor ini?" Itulah perbualan analyst senior.

Metrik 3: Penggunaan Papan Pemuka

Definisi: Pengguna aktif harian dan mingguan pada papan pemuka yang anda miliki, diukur terhadap populasi yang anda binanya. Ditambah kurva pengekalan minggu ke-4. Daripada orang yang menggunakannya pada minggu anda melancarkan, berapa ramai yang masih menggunakannya empat minggu kemudian?

Sasaran: 30% pengekalan minggu ke-4 ke atas. Di bawah itu, papan pemuka adalah hiasan, bukan infrastruktur.

Cara menjejak: Kebanyakan alat BI (Looker, Tableau, Mode, Hex, Sigma, Power BI) mempunyai log penggunaan terbina dalam. Tarik DAU/WAU per papan pemuka dan kurva pengekalan 4 minggu. Jika alat anda tidak mendedahkan ini, log papan pemuka kepada jadual log pertanyaan dan binanya sendiri. Ia adalah projek satu petang.

Satu corak yang patut dinamakan: papan pemuka hiasan. Kelihatan hebat. Mendapat pengumuman Slack. Mempunyai 400 paparan mingguan dalam dua minggu pertama. Menjelang minggu ke-5, tiga paparan, dan dua daripadanya adalah anda menyemak sama ada ia rosak. Penggunaan merudum kerana tiada siapa yang benar-benar mempunyai aliran kerja yang memerlukannya. Mereka mengklik sekali kerana ingin tahu atau sopan santun, dan tidak kembali lagi.

Jika anda mempunyai papan pemuka hiasan, anda mempunyai tiga pilihan:

• Bunuhnya. Sungguh. Turunkan, siarkan dalam saluran, ubah hala URL. Kos seluruh organisasi untuk mengekalkan papan pemuka yang lapuk adalah lebih tinggi daripada kos untuk menurunkannya. Pihak berkepentingan memetik nombor daripadanya yang tidak disegarkan sejak pelancaran, dan anda menghabiskan suku tahun seterusnya menerangkan mengapa arah aliran berbalik.
• Reka bentuk semula. Jika soalannya adalah nyata tetapi permukaannya tidak sesuai dengan aliran kerja, bina semula sekitar keputusan sebenar. Beralih dari gambaran keseluruhan 12 jubin kepada pandangan "keputusan hari ini" 3 jubin.
• Gantikan dengan intisari berulang. Kadangkala jawapannya bukan papan pemuka. Ia adalah e-mel Isnin pagi dengan tiga nombor yang penting dan naratif satu ayat. Penggunaan meningkat dari 4% ke 60% semalaman kerana permukaannya bertemu pengguna di mana mereka sebenarnya berada.

Metrik 4: NPS Pihak Berkepentingan

Definisi: Sekali suku tahun, anda menghantar kepada 5 pemohon utama anda satu soalan pada skala 0-10: "Adakah anda akan mengesyorkan bekerja dengan saya kepada pasukan lain yang memerlukan sokongan analitik?"

Sasaran: Purata melebihi 7. Sesiapa yang memberi skor di bawah 7, anda memesan kopi bersamanya.

Cara menjejak: Borang Google, lima penerima, tanpa nama jika boleh (jawapan lebih jujur), satu soalan, medan komen pilihan. Lakukan pada minggu ke-11 suku tahun supaya anda mempunyai masa untuk bertindak balas sebelum QBR.

Orang meremehkan NPS. Ia adalah satu nombor, mempunyai isu statistik yang diketahui, boleh dimainkan. Semua itu benar. Ia juga menangkap sesuatu yang tidak ditangkap oleh apa-apa yang lain: adakah orang yang bergantung kepada kerja anda mahu terus bergantung padanya?

Dua corak yang patut diperhatikan:

• Impak keputusan tinggi, NPS rendah. Anda menghantar analisis yang baik tetapi hubungan kerja penuh geseran. Biasanya bermakna anda menolak terlalu keras semasa pengambilan, atau gaya komunikasi anda mengganggu pihak berkepentingan senior. Kerja itu bernilai; pengalamannya tidak.
• NPS tinggi, impak keputusan rendah. Anda mudah diajak bekerja sama dan orang ramai suka mendapat nombor daripada anda. Mereka cuma tidak bertindak berdasarkannya. Ini adalah mod kegagalan paling berbahaya dalam analitik kerana ia terasa baik suku demi suku dan menenggelamkan kerjaya anda dalam jangka masa 2-3 tahun.

Keadaan sihat adalah kedua-duanya melebihi 7. Keadaan tidak sihat masing-masing mempunyai pembetulan khusus: masalah NPS adalah masalah komunikasi; masalah impak adalah masalah pembingkaian.

Metrik 5: Usia Tunggakan Ad Hoc

Definisi: Usia median, dalam hari, bagi setiap permintaan terbuka dalam barisan anda. Bukan bilangan tiket. Usia.

Sasaran: Median di bawah 7 hari. Melebihi 14 hari, anda adalah halangan, bukan analyst.

Cara menjejak: Helaian yang sama dari metrik 1. Tambah lajur status. Setiap hari, kira days_open = hari_ini - received_at untuk segala yang belum dihantar. Ambil mediannya.

Sebab usia penting dan bilangan tidak: barisan 20 permintaan yang semuanya berusia 2 hari adalah sihat. Barisan 6 permintaan di mana yang tertua berusia 31 hari tidak sihat. Anda tidak dapat melihat ini dengan bilangan tiket.

Usia memberitahu anda sesuatu yang diagnostik tentang cara anda mentriaj. Jika usia median anda merayap naik minggu demi minggu, salah satu daripada tiga perkara berlaku:

• Anda berkata ya kepada semuanya dan fizik sedang mengejar.
• Anda menyorok masalah yang sukar dan menghantar yang mudah. Barisan mengandungi kuburan permintaan kompleks yang terus anda tangguhkan kerana ia menakutkan.
• Kerja itu telah berkembang melebihi kapasiti anda dan anda perlu berbincang dengan pengurus anda tentang pengambilan pekerja, perantis, atau penutupan hasil kerja berulang.

Metrik susulan yang berguna: % permintaan yang lebih daripada 14 hari lama. Ini adalah "nombor malu." Jika 30% barisan terbuka anda lebih lama daripada dua minggu, pihak berkepentingan tersebut telah berputus asa dengan anda. Mereka telah mencari jalan lain. Mereka mendapat nombor dari tempat lain, selalunya sumber yang kurang ketat. Anda kehilangan kepercayaan tanpa mengetahuinya.

Diagnostik Penggunaan Tinggi, Impak Keputusan Rendah

Ini adalah perangkap yang saya lihat membunuh lebih banyak kerjaya analyst daripada yang lain. Patut ada bahagian tersendiri.

Anda mempunyai papan pemuka utama. Mungkin papan pemuka CEO, mungkin kiub hasil mingguan, mungkin gambaran keseluruhan prestasi pemasaran. Ia mempunyai 400 paparan mingguan. Penggunaan kelihatan baik. Anda menyenaraikannya dalam ulasan prestasi anda.

Kemudian anda menjalankan audit keputusan dan tiada keputusan dalam suku tahun terakhir yang boleh dikaitkan dengannya.

Apa yang berlaku: orang melihat papan pemuka, tetapi melihatnya adalah ritual, bukan tindakan. Mereka membukanya pada hari Isnin kerana ia adalah tabiat. Mereka menatal. Mereka menutupnya. Nombor-nombor itu masuk ke dalam perasaan latar belakang yang samar tentang "bagaimana perniagaan berjalan." Tiada apa pada hari Selasa yang berbeza kerana apa yang mereka lihat pada hari Isnin.

Cara mengesannya:

1. Tarik log penggunaan untuk 90 hari yang lalu. Sahkan papan pemuka mempunyai DAU/WAU yang sebenar.
2. Telusuri keputusan strategik suku tahun terakhir anda: perubahan harga, peruntukan semula saluran, keputusan pengambilan, pemotongan produk. Senaraikan 8-10 daripadanya.
3. Untuk setiap keputusan, tanya pembuat keputusan: "Adakah [nama papan pemuka] memaklumkan ini? Bagaimana?" Bersikap tepat. "Ia adalah sebahagian daripada cara saya memikirkan perniagaan" adalah tidak. "Saya menyemak jubin ke-4 pada 12 April dan ia mengubah pandangan saya tentang X" adalah ya.
4. Kira. Jika kurang daripada 2 daripada 10 keputusan boleh dikaitkan, papan pemuka itu adalah hiasan.

Apa yang perlu dilakukan apabila anda menemuinya:

• Jangan hanya bunuh papan pemuka. Temu bual tiga pengguna paling kerap selama 20 minit setiap seorang. Tanya mereka keputusan apa yang mereka cuba buat apabila membukanya.
• 90% masa, keputusan sebenar yang mereka buat adalah lebih sempit daripada papan pemuka itu. Mereka membuka 12 jubin untuk melihat satu arah aliran.
• Bina semula sekitar keputusan. Satu jubin, satu soalan, satu ambang. Penggunaan turun (lebih sedikit paparan halaman setiap minggu). Impak keputusan naik.

Naluri itu adalah untuk mempertahankan papan pemuka kerana penggunaan kelihatan baik. Rintangi. Penggunaan yang tidak mendorong keputusan adalah metrik kesombongan paling mahal dalam analitik, kerana ia menggunakan masa anda dan perhatian pihak berkepentingan sambil tidak menghasilkan apa-apa.

Slaid QBR

Satu slaid. Itulah keseluruhan intinya.

Pengurus anda tidak mempunyai masa untuk membaca ulasan diri 4 halaman. Jawatankuasa ganjaran pasti tidak. Berikan mereka gambaran keseluruhan dalam 30 saat.

Format:

Ulasan Diri Suku Tahunan, [Nama Anda], S[X] [Tahun]

| Metrik                              | Suku Ini | Suku Lalu | Arah Aliran | Sasaran   |
|-------------------------------------|----------|-----------|-------------|-----------|
| Masa untuk cerapan (median)         | 38j      | 51j       | turun 25%   | kurang 48j berlaku |
| Impak keputusan                     | 32%      | 19%       | naik 13 mt  | lebih 25% berlaku  |
| Pengekalan papan pemuka minggu ke-4 | 41%      | 28%       | naik 13 mt  | lebih 30% berlaku  |
| NPS pihak berkepentingan            | 8.2      | 7.1       | naik 1.1    | lebih 7 berlaku    |
| Usia tunggakan ad hoc (med)         | 5h       | 11h       | turun 55%   | kurang 7h berlaku  |

Keputusan dihantar suku tahun ini:
"Disyorkan untuk menghentikan iklan berbayar LinkedIn selepas analisis CAC menunjukkan
CAC $340 pada produk dengan margin sumbangan $180. Pemasaran memperuntukkan semula
$45 ribu/suku tahun ke penargetan semula. Jangkaan CAC $80 dalam 60 hari."

Kelemahan:
Mematikan papan pemuka Gambaran Pemasaran selepas audit S menunjukkan 0 daripada 8
keputusan dikaitkan dengannya dalam suku tahun sebelumnya. Digantikan dengan
e-mel intisari mingguan, kadar buka 73%, 4 keputusan dalam 6 minggu.

Itulah sahaja. Lima metrik, nilai semasa, perbandingan, arah aliran, sasaran, satu contoh keputusan, satu kelemahan jujur. Kelemahan itu bukan pilihan. Ulasan diri tanpa kelemahan dibaca sebagai tidak jujur atau tidak sedar. Kelemahan itulah yang membuat anda dianggap serius.

Jika anda boleh menghasilkan slaid ini setiap suku tahun, pengurus anda mempunyai peluru. Jika anda boleh menghasilkannya dengan anak panah hijau selama tiga suku tahun berturut-turut, anda mempunyai kes kenaikan pangkat yang bertahan dalam mesyuarat kalibrasi.

Perangkap Metrik Kesombongan yang Perlu Dielakkan

Empat metrik yang kelihatan seperti produktiviti dan sebenarnya adalah hingar. Jika ulasan diri anda mengemukakan mana-mana ini, rakan sebaya senior anda sedang menilai anda secara senyap.

Pertanyaan yang ditulis. Seribu pertanyaan yang tiada siapa bertindak berdasarkannya adalah seribu pertanyaan. Mengiranya adalah seperti mengira berapa kali anda membuka laptop. Pertanyaan bukan unitnya. Keputusanlah unitnya.

Tiket yang ditutup. Tiket yang ditutup memihak kepada analyst yang memilih yang mudah. Barisan memberi ganjaran kepada kelajuan berbanding kedalaman. Lebih teruk lagi, bilangan tiket memberi pihak berkepentingan izin untuk memecahkan soalan sebenar kepada 12 permintaan kecil berbanding satu perbualan strategik. Anda memainkan barisan anda sendiri.

Papan pemuka yang dibina. Membina papan pemuka adalah bahagian yang mudah. Menyelenggaranya, memansuhkannya, dan mendapatkan orang menggunakannya adalah bahagian yang sukar. Analyst yang membina 8 papan pemuka dan memansuhkan 3 daripadanya melakukan kerja yang lebih strategik berbanding yang membina 14 dan meninggalkan semuanya.

Baris data yang diproses. Saya pernah melihat ini dalam ulasan diri: "memproses 4.2 bilion baris suku tahun ini." Baris bukan kerja. Baris adalah apa yang gudang data lakukan. Sumbangan anda adalah soalan yang anda jawab, bukan jumlah data yang anda imbas untuk menjawabnya.

Ujian yang berguna: adakah metrik ini akan bertambah baik jika anda semakin buruk dalam tugas anda? Jika barisan anda semakin tidak kemas dan anda menerima lebih banyak permintaan yang tidak jelas, bilangan tiket meningkat. Jika anda membina papan pemuka yang mencolok yang tiada siapa gunakan, bilangan papan pemuka meningkat. Metrik kesombongan memberi ganjaran kepada tingkah laku yang salah. Lima metrik dalam panduan ini memberi ganjaran kepada yang betul.

Jejak Selama Satu Suku Tahun

Jejak lima ini selama satu suku tahun sebelum ulasan seterusnya anda. Itulah tugasannya. Tidak semua perlu hijau kali pertama, milik saya tidak, dan audit pertama adalah tamparan ke perut. Tetapi tindakan mengukur mengubah cara anda bekerja. Anda mula mentriaj secara berbeza. Anda menolak kembali semasa pengambilan. Anda menutup papan pemuka. Anda bertanya soalan impak keputusan pada setiap mesyuarat permulaan kerana anda tahu audit itu akan datang.

Perbualan dalam ulasan seterusnya berubah dari "saya sibuk" kepada "saya menghantar 12 analisis, 4 daripadanya mengubah keputusan, masa median saya untuk mendapat cerapan turun 25%, dan inilah slaidnya." Orang yang sama, tugas yang sama, trajektori kerjaya yang sama sekali berbeza.

Nombor itulah yang membuka kunci. Mula menjejak pada hari Isnin.

Ketahui Lebih Lanjut

• Templat Penerangan Kerja Data Analyst
• Pengurusan Pihak Berkepentingan untuk Analyst
• Laluan dari Data Analyst ke Senior dan Ketua BI
• Perangkap Biasa Data Analyst