Membina Kes ROI untuk Produk AI

Turn this article into takeaways for your work.
Each assistant summarizes the article only for you and suggests best practices for your work.
Kes ROI untuk produk AI perlu menjawab soalan yang lebih sukar berbanding perisian biasa. Pembeli bukan sahaja bertanya "adakah manfaatnya lebih besar daripada harga?" Mereka bertanya sama ada manfaat itu benar, sama ada ia akan muncul dalam baris yang dapat dilihat pasukan kewangan, dan sama ada kos sebenar, yang berubah mengikut penggunaan dan memerlukan orang untuk mengawasinya, telah dikira dengan jujur.
Halaman ini ditulis untuk vendor AI dan untuk champion di pihak pembeli yang perlu mempertahankan pembelian itu. Ia membincangkan tuas nilai, mengapa "jam yang dijimatkan" sahaja biasanya gagal, cara menetapkan garis dasar, rupa jumlah kos pemilikan (TCO) untuk AI, cara menjalankan senario konservatif, dijangka dan optimistik, serta bagaimana bukti harus berubah daripada anggaran prajualan kepada projek rintis hingga pembaharuan. Untuk formula umum dan struktur dokumen, lihat ROI dan penciptaan kes perniagaan. Halaman ini membincangkan perkara yang khusus untuk AI.
Enam Tuas Nilai
Kebanyakan kes perniagaan AI menggunakan segelintir tuas yang sama. Menamakannya secara berasingan adalah penting, kerana setiap satu diukur secara berbeza dan setiap satu meyakinkan orang yang berbeza dalam jawatankuasa pembelian.
| Tuas | Maksudnya | Cara mengukurnya | Siapa paling peduli |
|---|---|---|---|
| Masa dijimatkan | Kurang masa manusia bagi setiap tugasan | Minit setiap tugasan, sebelum dan selepas | Pengurus operasi |
| Daya pemprosesan | Lebih banyak unit dikendalikan dengan pasukan yang sama | Tugasan disiapkan setiap orang setiap tempoh | Operasi, COO |
| Kualiti dan pengurangan ralat | Kurang kesilapan, kurang kerja semula | Kadar ralat, jam kerja semula, eskalasi | Kualiti, pematuhan |
| Peningkatan hasil | Lebih banyak prospek diusahakan, respons lebih pantas, penukaran lebih baik | Kadar penukaran, saluran jualan dicipta, kadar kemenangan | Ketua jualan, CRO |
| Pengelakan kos | Kerja yang tidak lagi memerlukan pengambilan pekerja atau vendor luar | Kakitangan atau perbelanjaan kontraktor yang dielakkan | CFO |
| Pengurangan risiko | Peluang lebih rendah untuk kegagalan yang mahal | Kadar insiden, penemuan audit | Undang-undang, keselamatan, CFO |
Kes yang meyakinkan biasanya mengutamakan satu atau dua tuas dan menganggap selebihnya sebagai potensi tambahan yang tidak dikira. Kes yang menuntut kesemua enam sekali gus dibaca seperti senarai hajat, dan penyemak kewangan akan memangkasnya kepada apa sahaja yang dapat disahkan.
Mengapa "Jam yang Dijimatkan" Sahaja Jarang Lepas Penilaian CFO
Masa yang dijimatkan ialah tuntutan paling semula jadi untuk produk AI dan paling mudah dipatahkan. Sebabnya mudah: masa yang dijimatkan bukan kos yang dihapuskan.

Jika sesuatu alat menjimatkan 30 minit sehari bagi setiap orang, tiada apa yang berubah dalam penyata pendapatan melainkan sesuatu berlaku dengan masa itu. Sama ada syarikat memerlukan lebih sedikit orang (pengurangan kakitangan atau kontraktor, atau pelan pengambilan yang tidak lagi memerlukan satu jawatan), atau orang yang sama mengendalikan lebih banyak kerja (daya pemprosesan), atau mereka beralih kepada kerja yang menjana hasil. Selagi salah satu daripadanya belum berlaku, penjimatan itu nyata bagi pekerja tetapi tidak kelihatan kepada CFO.
Jadi soalan yang perlu dimasukkan dalam kes bukanlah "berapa jam yang dibebaskan?" tetapi "ke mana jam itu pergi?" Jawapan yang baik adalah khusus:
- Tunggakan kerja yang kini memerlukan dua pengambilan tambahan tidak lagi memerlukannya.
- Pasukan yang menolak kerja kerana sudah mencapai kapasiti akan menerimanya.
- Wakil jualan mendapat 30 minit lagi untuk menjual dan kes itu menyatakan apa yang dijangka dihasilkan oleh masa tersebut.
Vendor yang menjawab soalan ini sebelum CFO bertanya biasanya yang berjaya melepasi semakan. Disiplin yang sama muncul dalam jualan berasaskan nilai: nilai ialah hasil yang dapat dinyatakan pembeli dalam istilah mereka sendiri, bukan aktiviti yang dipercepatkan oleh produk anda.
Satu lagi peringatan. Angka masa dijimatkan yang tiba tanpa populasi atau tugasan yang dilampirkan ialah bukti paling lemah dalam bilik itu. Hal ini membawa kita kepada kajian yang diterbitkan.
Apa yang Disokong dan Tidak Disokong oleh Bukti yang Diterbitkan
Tiga kajian yang banyak dipetik memberikan vendor dan champion angka sebenar untuk digunakan. Setiap satu mengukur populasi tertentu pada jenis tugasan tertentu, dan kes itu harus menyatakannya.
Ejen sokongan pelanggan. Brynjolfsson, Li dan Raymond mengkaji pengenalan berperingkat pembantu perbualan AI generatif menggunakan data daripada 5,179 ejen sokongan pelanggan. Dalam kertas kerja NBER mereka, akses kepada alat itu meningkatkan produktiviti, yang diukur melalui isu diselesaikan sejam, sebanyak 14% secara purata, termasuk peningkatan 34% bagi pekerja baharu dan berkemahiran rendah, dengan kesan minimum ke atas pekerja berpengalaman dan berkemahiran tinggi. Ini ialah operasi sokongan satu firma. Angka 14% terpakai pada isu diselesaikan sejam dalam kalangan ejen tersebut, bukan pada pekerjaan lain.
Tugasan penulisan profesional. Noy dan Zhang menjalankan eksperimen dalam talian yang dipradaftar dengan 444 profesional berpendidikan kolej yang melakukan tugasan penulisan khusus pekerjaan yang diberi insentif, dengan separuh daripadanya didedahkan secara rawak kepada ChatGPT. Dalam kertas kerja mereka (Mac 2023, belum disemak rakan sebaya dalam versi itu), masa yang diambil berkurang sebanyak 0.8 sisihan piawai dan kualiti output meningkat sebanyak 0.4 sisihan piawai, dan taburan produktiviti menjadi lebih sempit kerana pekerja berkebolehan rendah mendapat lebih banyak manfaat. Ini ialah kesan pada tugasan penulisan pendek peringkat pertengahan dalam eksperimen, bukan pada minggu kerja penuh.
Perunding dan "sempadan bergerigi". Ringkasan Harvard Business School AI Institute mengenai kajian yang dijalankan bersama Boston Consulting Group meliputi 758 perunding, kira-kira 7% daripada tenaga kerja penyumbang individu firma itu. Bagi tugasan dalam sempadan AI, alat itu meningkatkan kelajuan lebih 25%, prestasi yang dinilai manusia lebih 40% dan penyiapan tugasan lebih 12%. Para penyelidik menggambarkan "sempadan teknologi bergerigi" di mana AI cemerlang dalam sesetengah tugasan tetapi kurang berkesan dalam yang lain. Pengajaran praktikalnya ialah keuntungan bergantung pada sama ada tugasan pembeli berada di dalam sempadan itu, dan tiada sesiapa patut menganggap ia berada di dalamnya.
Tiga perkara untuk diambil daripada kajian ini semasa membina kes:
- Padankan populasinya. Hasil 14% daripada ejen sokongan ialah bukti untuk kerja jenis sokongan, bukan untuk kewangan atau kejuruteraan. Nyatakan tugasan mana yang berkaitan dengan hasil anda.
- Jangkakan keuntungan yang tidak sekata. Dalam kajian sokongan, manfaatnya kebanyakannya dinikmati pekerja baharu. Jika pasukan pembeli anda kebanyakannya berpengalaman, hasil purata mungkin tidak berpindah. Projek rintis pembeli sendiri ialah bukti yang berkesan.
- Anggap penyelidikan luar sebagai andaian awal, bukan janji. Ia menjadikan anggaran anda munasabah. Ia tidak menggantikan pengukuran aliran kerja pembeli.
Tetapkan Garis Dasar Sebelum Perkara Lain
Tuntutan ROI ialah perbandingan, dan perbandingan memerlukan titik permulaan. Tanpa garis dasar, "meningkat sebanyak 20%" ialah dakwaan yang tidak dapat disemak sesiapa.
Rekod keadaan semasa metrik sebelum produk menyentuh aliran kerja:
- Volum dan campuran: berapa banyak tugasan, daripada jenis apa, setiap tempoh.
- Usaha setiap tugasan: masa pengendalian atau kos setiap tugasan, diukur dan bukannya diteka.
- Kualiti: kadar ralat, kadar kerja semula atau kadar eskalasi pada tugasan yang sama.
- Kos penuh: gaji serta faedah dan overhed bagi orang yang melakukan kerja itu.
- Musim: tempoh sebelum yang merangkumi bulan lengang dan bulan sibuk akan mengelirukan.
Gunakan data pembeli. Purata industri boleh digunakan untuk semakan kewarasan, tetapi angka yang diukur sendiri oleh pembeli ialah angka yang akan dipercayai pasukan kewangan mereka, seperti yang turut ditekankan dalam penciptaan kes perniagaan.
Kemudian pilih cara anda akan membandingkan. Terdapat dua pilihan yang jujur:
| Kaedah | Cara ia berfungsi | Kekuatan | Kelemahan |
|---|---|---|---|
| Kumpulan kawalan | Sesetengah pengguna mendapat alat itu, pengguna serupa tidak, dalam tempoh yang sama | Mengawal kesan musim dan perubahan lain | Memerlukan cukup pengguna yang setanding |
| Sebelum dan selepas | Ukur kumpulan yang sama sebelum dan selepas pelancaran | Mudah dijalankan | Apa-apa sahaja yang berubah dalam tempoh itu dikreditkan kepada AI |
Kumpulan kawalan ialah reka bentuk yang lebih kukuh, dan pelancaran berperingkat dalam kajian sokongan memberi penulisnya satu versi reka bentuk ini. Jika kawalan tidak mungkin, perbandingan sebelum dan selepas boleh digunakan jika anda juga merekodkan apa lagi yang berubah dalam tempoh itu, seperti pengambilan pekerja baharu, perubahan harga atau musim puncak.
Jumlah Kos Pemilikan untuk Produk AI
Kelemahan paling biasa dalam kes ROI vendor ialah bahagian kos yang berhenti pada langganan. Penyemak kewangan akan membina gambaran penuh sendiri, dan vendor yang menunjukkannya terlebih dahulu kelihatan lebih meyakinkan.

| Baris kos | Apa yang perlu dimasukkan | Berkelakuan seperti |
|---|---|---|
| Langganan atau yuran platform | Yuran yang dikontrakkan | Tetap bagi setiap tempoh |
| Yuran berasaskan penggunaan atau inferens | Caj yang meningkat mengikut volum, panggilan atau output | Berubah-ubah, meningkat dengan penerimaan |
| Integrasi | Menyambung kepada CRM, sistem tiket, stor data, identiti | Kebanyakannya sekali sahaja |
| Penyediaan data | Membersihkan, melabel, menstrukturkan input pembeli | Sekali sahaja ditambah penyelenggaraan |
| Semakan dan pengawasan manusia | Masa yang digunakan untuk menyemak output dan mengendalikan pengecualian | Berterusan, sering dianggarkan terlalu rendah |
| Pengurusan perubahan | Latihan, prosedur baharu, komunikasi | Kebanyakannya di peringkat awal |
| Tadbir urus dan keselamatan | Semakan, dasar, audit, kerja risiko vendor | Di peringkat awal ditambah berterusan |
Dua perkara perlu diberi penekanan.
Yuran berubah-ubah mengubah jawapannya. Jika sebahagian kos bergantung pada penggunaan, kejayaan akan menaikkan bil. Kes harus menunjukkan kos pada volum yang dijangka dan pada volum yang lebih tinggi, supaya pembeli melihat apa yang berlaku jika penerimaan melebihi rancangan. Harga berasaskan penggunaan berbanding berasaskan hasil menerangkan bagaimana struktur ini mengubah pendedahan pembeli.
Semakan manusia ialah kos sebenar. Jika seseorang masih menyemak sebahagian output, masa itu perlu dimasukkan dalam model. Meninggalkannya ialah cara paling cepat untuk menyebabkan CFO tidak mempercayai angka selebihnya. Kadar semakan juga sesuatu yang boleh diukur oleh projek rintis, dan sebab itulah projek rintis ialah tempat yang tepat untuk menggantikan tekaan.
Contoh Kiraan (Ilustrasi Sahaja)
Angka di bawah direka untuk menunjukkan aritmetik. Ia tidak menggambarkan syarikat atau produk sebenar, dan angka anda akan berbeza.

Andaikan sebuah pasukan sokongan mengendalikan 20,000 tiket sebulan pada 0.25 jam setiap satu, iaitu 5,000 jam pengendalian sebulan. Kos buruh penuh ialah $30 sejam, jadi kos pengendalian ialah $150,000 sebulan.
Kos. Yuran platform sebanyak $48,000 setahun. Yuran penggunaan sebanyak $0.15 bagi setiap tiket yang dikendalikan dengan alat itu, iaitu 20,000 x 12 x $0.15 = $36,000 setahun pada volum ini. Semakan manusia selama 100 jam sebulan pada $30 ialah $3,000 sebulan, atau $36,000 setahun. Kos sekali sahaja ialah $20,000 untuk integrasi dan penyediaan data serta $12,000 untuk pengurusan perubahan dan tadbir urus. Ini memberikan kos berterusan sebanyak $120,000 setahun ($10,000 sebulan), kos sekali sahaja sebanyak $32,000, dan jumlah tahun pertama sebanyak $152,000.
Manfaat. Alat itu mengurangkan masa pengendalian sebanyak 10%, 20% atau 30% bergantung pada senario. Tetapi hanya sebahagian daripada masa yang dibebaskan menjadi kos yang dihapuskan atau kerja tambahan yang diserap: masing-masing 40%, 60% atau 80%.
| Senario | Pengurangan masa pengendalian | Jam dibebaskan sebulan | Bahagian direalisasikan sebagai nilai | Nilai sebulan | Nilai setahun |
|---|---|---|---|---|---|
| Konservatif | 10% | 500 | 40% | $6,000 | $72,000 |
| Dijangka | 20% | 1,000 | 60% | $18,000 | $216,000 |
| Optimistik | 30% | 1,500 | 80% | $36,000 | $432,000 |
Keputusan, tahun pertama.
| Senario | Manfaat tahun pertama | Kos tahun pertama | Bersih | ROI (bersih / kos) | Tempoh bayar balik |
|---|---|---|---|---|---|
| Konservatif | $72,000 | $152,000 | -$80,000 | -52.6% | Tidak pernah pada kadar ini |
| Dijangka | $216,000 | $152,000 | $64,000 | 42.1% | 4 bulan |
| Optimistik | $432,000 | $152,000 | $280,000 | 184.2% | Kira-kira 1.2 bulan |
Tempoh bayar balik ialah kos sekali sahaja $32,000 dibahagikan dengan manfaat bulanan tolak kos berterusan bulanan $10,000: $32,000 / $8,000 = 4 bulan dalam kes dijangka, dan $32,000 / $26,000 ialah kira-kira 1.2 bulan dalam kes optimistik. Dalam kes konservatif, nilai bulanan ($6,000) lebih rendah daripada kos berterusan ($10,000), jadi pelaburan itu tidak pernah pulih.
Baris terakhir itulah yang berguna. Ia memberitahu kedua-dua pihak andaian mana yang menjadi asas keseluruhan kes: saiz pengurangan masa pengendalian dan bahagian masa yang dibebaskan yang menjadi nilai sebenar. Itulah dua angka yang patut diukur oleh projek rintis.
Analisis Sensitiviti: Tunjukkan Julat, Bukan Satu Titik
Satu angka ROI mengundang satu hujah. Tiga senario mengundang perbualan tentang andaian mana yang boleh dipercayai.
- Konservatif: hujung bawah apa yang akan anda pertahankan jika projek rintis mengecewakan.
- Dijangka: angka yang paling disokong oleh bukti.
- Optimistik: apa yang berlaku jika penerimaan dan hasil kedua-duanya melebihi rancangan.
Ubah input yang paling penting dan nyatakan input yang mana. Dalam contoh tadi, kadar realisasi mengubah hasil sebanyak keuntungan produktiviti. Jika pasukan kewangan pembeli sendiri memilih andaian konservatif, itu petanda baik: mereka kini memiliki kes itu. Kes yang masih berkesan pada angka mereka jauh lebih mudah diluluskan berbanding kes yang hanya berkesan pada angka anda.
Bagaimana Bukti Berubah Sepanjang Urus Niaga
Kes ROI yang sama matang melalui tiga peringkat, dan setiap peringkat harus menggantikan tekaan dengan ukuran.

| Peringkat | Bukti | Keyakinan | Apa yang perlu diminta |
|---|---|---|---|
| Anggaran prajualan | Garis dasar pembeli ditambah penyelidikan luar sebagai andaian awal | Rendah hingga sederhana | Persetujuan tentang garis dasar dan metrik |
| Pengukuran projek rintis | Hasil yang diukur pada aliran kerja pembeli sendiri, kumpulan kawalan atau sebelum dan selepas | Sederhana hingga tinggi | Persetujuan tentang kriteria kejayaan terlebih dahulu |
| Bukti pembaharuan | Hasil daripada pengeluaran langsung sepanjang satu tempoh penuh, dengan kos sebenar | Tinggi | Tunjukkan nilai yang direalisasikan berbanding kes asal |
Pada peringkat prajualan, pembingkaian yang jujur ialah "inilah julatnya dan andaian di sebaliknya." Pada peringkat projek rintis, matlamatnya ialah menggantikan dua atau tiga andaian paling berisiko dengan ukuran, seperti yang diterangkan dalam mengapa demo lebih penting untuk produk AI, termasuk peraturan keputusan bertulis. Semasa pembaharuan, pembeli bertanya sama ada ia berbaloi, jadi laporan balas ialah perbandingan hasil sebenar dengan kes asal, termasuk bahagian di mana realiti lebih rendah. Vendor yang melaporkannya secara terus terang jauh lebih berkemungkinan dipercayai tahun berikutnya. Halaman daripada projek rintis kepada kontrak membincangkan cara menukar bukti itu kepada komitmen komersial, dan menjual AI kepada pembeli yang skeptikal membincangkan cara membentangkannya kepada orang yang menjangka akan kecewa. Kewangan juga biasanya sebahagian daripada jawatankuasa pembelian AI, jadi bina kes itu untuk pembaca tersebut.
Senarai Semak untuk Kes ROI
- Adakah kes itu mengutamakan satu atau dua tuas dan tidak menuntut kesemua enam?
- Adakah ia menyatakan ke mana masa yang dibebaskan pergi, dan siapa yang mengesahkannya?
- Adakah terdapat garis dasar yang diukur daripada data pembeli?
- Adakah kaedah perbandingan dinyatakan (kumpulan kawalan atau sebelum dan selepas)?
- Adakah bahagian kos merangkumi yuran penggunaan, integrasi, penyediaan data, masa semakan, pengurusan perubahan dan tadbir urus?
- Adakah terdapat senario konservatif, dijangka dan optimistik dengan andaian yang ditunjukkan?
- Adakah setiap angka luar dipadankan dengan populasi dan tugasan asalnya?
- Adakah pelan projek rintis mengukur dua atau tiga andaian yang menjadi asas kes itu?
Fakta Utama
- Ejen sokongan pelanggan: merentasi 5,179 ejen di satu firma, akses kepada pembantu AI generatif meningkatkan isu diselesaikan sejam sebanyak 14% secara purata dan 34% bagi pekerja baharu dan berkemahiran rendah, dengan kesan minimum ke atas pekerja berpengalaman (Brynjolfsson, Li dan Raymond, NBER w31161).
- Tugasan penulisan profesional: dalam eksperimen yang dipradaftar dengan 444 profesional berpendidikan kolej, ChatGPT mengurangkan masa yang diambil sebanyak 0.8 sisihan piawai, meningkatkan kualiti sebanyak 0.4 sisihan piawai, dan menyempitkan taburan produktiviti (Noy dan Zhang, kertas kerja Mac 2023).
- Perunding dalam sempadan AI: merentasi 758 perunding, tugasan di dalam sempadan menyaksikan kelajuan meningkat lebih 25%, prestasi yang dinilai manusia meningkat lebih 40% dan penyiapan tugasan meningkat lebih 12%, manakala AI kurang berkesan dalam tugasan lain (ringkasan HBS AI Institute).
- Masa yang dijimatkan bukan kos yang dihapuskan: penjimatan dikira secara kewangan hanya apabila kapasiti diagihkan semula, kerja diserap atau pengambilan pekerja dielakkan.
- Kos pemilikan melangkaui langganan: yuran penggunaan, integrasi, penyediaan data, semakan manusia, pengurusan perubahan dan tadbir urus semuanya perlu dimasukkan dalam model.
Bacaan Berkaitan

Co-Founder & COO
On this page
- Enam Tuas Nilai
- Mengapa "Jam yang Dijimatkan" Sahaja Jarang Lepas Penilaian CFO
- Apa yang Disokong dan Tidak Disokong oleh Bukti yang Diterbitkan
- Tetapkan Garis Dasar Sebelum Perkara Lain
- Jumlah Kos Pemilikan untuk Produk AI
- Contoh Kiraan (Ilustrasi Sahaja)
- Analisis Sensitiviti: Tunjukkan Julat, Bukan Satu Titik
- Bagaimana Bukti Berubah Sepanjang Urus Niaga
- Senarai Semak untuk Kes ROI
- Fakta Utama
- Bacaan Berkaitan