Bahasa Indonesia
Metrik Keterlibatan Peserta Didik

Turn this article into takeaways for your work.
Each assistant summarizes the article only for you and suggests best practices for your work.
"Keterlibatan" adalah kata yang paling sering dipakai di dashboard produk pembelajaran dan salah satu yang paling kurang didefinisikan. Peserta didik yang login setiap hari dan mengklik slide tanpa membacanya tampak sangat terlibat di grafik login. Peserta didik yang belajar offline selama dua jam lalu mengikuti ujian akhir tampak absen.
Metrik keterlibatan peserta didik adalah pengukuran yang dipakai bisnis pembelajaran atau tim pelatihan untuk menilai apakah orang benar-benar berpartisipasi dalam pembelajaran, bukan sekadar terdaftar. Artikel ini membahas apa yang dimaksud peneliti dengan keterlibatan, metrik yang dilacak tim EdTech dan L&D, cara membedakan indikator utama dari indikator tertinggal, mengapa sebagian angka adalah vanity metric, apa kata riset tentang data aktivitas dan hasil, serta aturan privasi apa yang berlaku saat Anda mengumpulkannya.
Fakta Utama
- Peneliti umumnya membagi keterlibatan menjadi tiga bagian: perilaku (partisipasi), emosional (perasaan terhadap pembelajaran), dan kognitif (investasi dalam pemahaman). Tinjauan tahun 2004 yang banyak dikutip merekomendasikan agar keterlibatan dipelajari sebagai konstruk multifaset (Fredricks, Blumenfeld dan Paris, 2004).
- Sebagian besar metrik platform hanya menangkap bagian perilaku. Keterlibatan emosional dan kognitif membutuhkan survei, asesmen, atau data interaksi yang lebih kaya.
- Dalam satu kursus Blackboard Vista, 15 variabel pelacakan LMS berkorelasi signifikan dengan nilai akhir, dan model yang dibangun dari pesan diskusi, pesan email, dan asesmen yang diselesaikan menjelaskan lebih dari 30% variasi nilai (Macfadyen dan Dawson, 2010).
- Studi atas sembilan kursus sarjana blended (n = 4.134) menemukan bahwa fitur LMS yang memprediksi keberhasilan berbeda di setiap kursus, sehingga satu model generik dapat melebih-lebihkan atau meremehkan efeknya (Gasevic et al., 2016).
- Berdasarkan GDPR, data pribadi harus dibatasi pada apa yang diperlukan untuk tujuan yang dinyatakan (GDPR Article 5). Mengumpulkan setiap klik "untuk berjaga-jaga" bertentangan dengan prinsip itu.
Apa arti "keterlibatan"
Istilah ini berasal dari riset pendidikan, bukan analitik produk. Fredricks, Blumenfeld dan Paris meninjau literatur keterlibatan di sekolah pada 2004 dalam Review of Educational Research. Mereka menjelaskan keterlibatan perilaku, emosional, dan kognitif serta merekomendasikan agar keterlibatan diperlakukan sebagai konstruk multifaset, sambil mencatat bahwa riset sejauh itu punya keterbatasan dan bahwa deskripsi yang lebih kaya tentang bagaimana siswa berperilaku, merasa, dan berpikir diperlukan (Fredricks, Blumenfeld dan Paris, 2004). Tinjauan mereka membahas siswa sekolah, sehingga peserta didik korporat dewasa merupakan perluasan dari kerangka itu, bukan pengujian langsungnya.
Ketiga bagian itu mudah diterjemahkan ke produk pembelajaran.
| Tipe | Cakupan | Contoh sinyal |
|---|---|---|
| Perilaku | Partisipasi dan upaya | Login, pelajaran yang dimulai, tugas yang dikumpulkan, posting forum, kehadiran di sesi langsung |
| Emosional | Reaksi dan sikap | Peringkat kepuasan, skor "apakah Anda akan merekomendasikan", sentimen dalam komentar, kembali secara sukarela |
| Kognitif | Upaya mental dan strategi | Kualitas jawaban, penggunaan soal latihan, waktu yang dihabiskan pada butir sulit, penjelasan diri, penerapan materi ke pekerjaan |
Poin praktisnya, dashboard yang hanya dibangun dari log mengukur satu dari ketiganya. Itu bukan kelemahan selama semua orang tahu. Hal itu menjadi masalah ketika "skor keterlibatan" dilaporkan seolah mencakup ketiganya.
Metrik inti
Tim biasanya melacak campuran jangkauan, aktivitas, progres, dan sentimen. Tabel di bawah mendefinisikan yang umum, memberi rumus tipikal, dan menyebutkan apa yang terlewat oleh masing-masing. Rumus bervariasi antarperusahaan, jadi tuliskan definisi Anda sendiri sebelum membandingkan angka antartim atau antarvendor.

| Metrik | Definisi | Rumus tipikal | Apa yang terlewat |
|---|---|---|---|
| Peserta aktif (DAU, WAU, MAU) | Peserta didik unik yang melakukan tindakan yang memenuhi syarat dalam sehari, seminggu, atau sebulan | Jumlah pengguna unik dengan event yang memenuhi syarat dalam jendela waktu | Sepenuhnya bergantung pada arti "memenuhi syarat." Login saja hanya memberi sedikit informasi |
| Stickiness | Seberapa sering pengguna bulanan kembali pada hari tertentu | DAU dibagi MAU | Penggunaan harian bukan tujuan yang tepat untuk kursus yang diikuti mingguan, atau modul kepatuhan yang diambil setahun sekali |
| Waktu pengerjaan | Waktu yang dihabiskan dalam aktivitas belajar | Jumlah waktu sesi pada konten, latihan, atau asesmen | Tab menganggur, timeout sesi yang buruk, dan pembaca cepat mendistorsinya. Waktu lama bisa berarti kebingungan |
| Login vs aktivitas bermakna | Porsi login yang mencakup tindakan belajar | Sesi dengan pelajaran, kuis, atau posting dibagi semua sesi | Anda harus mendefinisikan "bermakna," dan definisinya mengubah jawabannya |
| Progres | Seberapa jauh peserta didik melalui konten yang ditugaskan | Butir yang diselesaikan dibagi butir yang ditugaskan | Menyelesaikan bukan berarti belajar. Peserta didik bisa langsung loncat ke akhir |
| Tingkat penyelesaian | Porsi peserta terdaftar yang menyelesaikan | Jumlah yang menyelesaikan dibagi jumlah yang mendaftar | Tidak menjelaskan seberapa baik mereka belajar. Definisi kohort dan waktu bervariasi |
| Percobaan asesmen | Seberapa sering peserta didik mencoba kuis atau tes | Percobaan per peserta didik, dan percobaan per butir | Pengulangan bisa berarti ketekunan atau menebak |
| Partisipasi diskusi | Memposting dan membalas di forum atau chat | Posting dan balasan per peserta didik, porsi peserta didik yang memposting | Menghitung posting tanpa memandang panjangnya secara sama. Menyimak juga belajar |
| Tingkat kembali | Porsi peserta didik yang kembali setelah sesi pertama | Peserta didik dengan sesi kedua dalam N hari dibagi peserta didik dengan sesi pertama | Jendela N bersifat sewenang-wenang. Tidak membedakan kembali untuk belajar dari kembali untuk mengecek ulang tenggat |
| Kepuasan dan NPS | Pendapat peserta didik tentang pengalaman | Skor survei, atau persentase promoter dikurangi detractor | Tingkat respons rendah, dan peserta didik yang puas belum tentu belajar lebih banyak |
Beberapa catatan untuk memakainya dengan baik.
Definisikan tindakan yang memenuhi syarat terlebih dahulu. "Peserta didik aktif bulanan" bisa berarti siapa pun yang membuka aplikasi atau hanya orang yang menyelesaikan pelajaran atau menjawab pertanyaan. Kedua definisi itu bisa berbeda dengan faktor yang besar. Pilih definisi yang sesuai dengan nilai yang Anda janjikan, dan jaga agar tetap tetap supaya tren bermakna.
Laporkan distribusi, bukan hanya rata-rata. Waktu pengerjaan dan jumlah aktivitas biasanya miring: segelintir pengguna berat menarik rata-rata naik sementara sebagian besar peserta didik melakukan sedikit. Median dan porsi peserta didik di atas ambang batas memberi tahu Anda lebih banyak.
Segmentasikan. Keterlibatan berbeda menurut kohort, peran, perangkat, jenis konten, dan apakah peserta didik memilih kursus atau ditugaskan. Angka gabungan menyembunyikan semua itu. Perbedaan antara pembelajaran sukarela dan wajib saja dapat mengubah seperti apa tingkat kembali yang "baik."
Pasangkan perilaku dengan hasil. Setiap metrik perilaku membutuhkan pendamping yang menunjukkan apakah ada yang dipelajari, seperti hasil asesmen atau ukuran yang relevan dengan pekerjaan. Selengkapnya di bawah.
Indikator utama dan indikator tertinggal
Indikator utama (leading) bergerak lebih awal dan membantu Anda bertindak. Indikator tertinggal (lagging) mengonfirmasi apa yang sudah terjadi.

Indikator utama mencakup aktivitas minggu pertama, porsi peserta didik yang memulai pelajaran pertama dalam beberapa hari setelah mendaftar, percobaan kuis awal, sesi kedua, dan posting diskusi pertama. Semua ini dengan cepat memberi tahu apakah onboarding berjalan. Peserta didik yang tidak pernah memulai adalah masalah retensi yang masih bisa Anda perbaiki.
Indikator tertinggal mencakup penyelesaian, hasil asesmen akhir, sertifikasi, perpanjangan, dan hasil bisnis yang ingin diubah oleh pelatihan. Inilah angka yang diperhatikan pembeli, tetapi datang setelah terlambat untuk mengubah kohort di depan Anda.
Langkah yang berguna adalah mencari sinyal awal mana yang memprediksi sinyal tertinggal di produk Anda sendiri. Jika peserta didik yang mencoba kuis di minggu pertama menyelesaikan dengan tingkat yang jauh lebih tinggi, itu sesuatu untuk dirancang: dorong percobaan pertama. Riset tentang prediksi di bawah menunjukkan mengapa Anda sebaiknya memeriksanya secara lokal, bukan berasumsi. Untuk penyelesaian secara khusus, lihat tingkat penyelesaian kursus setelah dipublikasikan, dan untuk sisi pembelian, bagaimana angka-angka ini masuk ke percakapan perpanjangan di membuktikan ROI pelatihan.
Vanity metric
Vanity metric adalah angka yang mudah ditumbuhkan, tampak bagus di laporan, dan tidak mengubah keputusan. Dalam produk pembelajaran, tersangka yang biasa adalah:
- Pengguna terdaftar. Menghitung pendaftaran, bukan penggunaan. Angkanya hanya naik.
- Total login. Menghargai notifikasi dan pengingat paksa. Pengingat login wajib menggelembungkannya tanpa ada pembelajaran.
- Jam konten yang dikonsumsi. Mencampur belajar yang terlibat dengan autoplay dan tab yang terbuka.
- Penyelesaian tanpa asesmen. Jika mengklik "berikutnya" sampai slide terakhir dihitung selesai, maka penyelesaian mengukur kesabaran.
- Lencana dan poin yang diperoleh. Ini bisa berguna dalam desain permainan, tetapi sebagai angka utama keterlibatan, keduanya mengukur permainannya, bukan pembelajarannya.
- Tampilan kursus atau awal video. Memulai bukan menyelesaikan dan menyelesaikan bukan memahami.
Tes cepat: jika angka ini berlipat ganda besok, apakah Anda akan tahu apakah pembelajaran membaik? Jika tidak, itu vanity metric. Versi yang lebih baik memasangkan aktivitas dengan hasil, misalnya porsi peserta didik yang menjawab setidaknya lima soal latihan dan membaik pada percobaan keduanya.
Berhati-hatilah terutama dengan mekanisme keterlibatan yang menaikkan angka tanpa menaikkan pembelajaran. Poin dan streak dapat mengangkat aktivitas, tetapi apakah itu membantu bergantung pada desain, yang merupakan topik tersendiri di gamifikasi dalam pembelajaran.
Apakah keterlibatan memprediksi hasil belajar?
Sebagian, dan itu tergantung kursusnya.

Macfadyen dan Dawson menganalisis data pelacakan LMS dari satu kursus Blackboard Vista dalam studi proof-of-concept yang diterbitkan di Computers & Education. Mereka menemukan 15 variabel dengan korelasi sederhana yang signifikan terhadap nilai akhir. Model regresi yang dibangun dari variabel termasuk jumlah pesan diskusi yang diposting, pesan email yang dikirim, dan asesmen yang diselesaikan menjelaskan lebih dari 30% variasi nilai akhir, dan model logistik dengan tepat mengidentifikasi 81% mahasiswa yang gagal (Macfadyen dan Dawson, 2010). Dua hal yang perlu diingat: itu hanya satu kursus, dan menjelaskan 30% variasi nilai berarti sebagian besarnya tidak terjelaskan.
Gasevic, Dawson, Rogers dan Gasevic kemudian menguji gagasan ini pada sembilan kursus sarjana yang diajarkan dengan model blended, dengan 4.134 mahasiswa. Temuan mereka adalah bahwa daya prediksi dan prediktor yang signifikan berbeda antara model khusus kursus dan model yang digeneralisasi. Mereka menyimpulkan bahwa riset analitik harus memperhitungkan bagaimana teknologi dipakai di tiap kursus, dan bahwa mengabaikan kondisi instruksional dapat melebih-lebihkan atau meremehkan efek fitur LMS terhadap keberhasilan akademik (Gasevic et al., 2016).
Apa artinya bagi tim produk atau L&D:
- Data aktivitas membawa sinyal yang nyata. Partisipasi dan perilaku asesmen berhubungan dengan hasil, itulah sebabnya dashboard peringatan dini layak dibangun.
- Sinyal itu tidak portabel. Aturan yang berhasil di satu kursus, seperti "kurang dari X posting berarti berisiko," bisa gagal di kursus lain di mana diskusi tidak dinilai atau tidak diharapkan. Validasi prediktor per jenis kursus, dan validasi ulang ketika desain kursus berubah.
- Korelasi bukan tuas. Peserta didik yang lebih banyak memposting mungkin lebih berhasil karena sudah termotivasi. Mendorong semua orang memposting lebih banyak tidak menjamin nilai yang lebih baik. Uji intervensi, bukan hanya korelasi.
- Kedua studi dilakukan di pendidikan tinggi. Program korporat berbeda: kursus lebih pendek, penilaian lebih sedikit, lebih banyak konten wajib, dan hasil diukur di tempat kerja. Perlakukan temuan itu sebagai peringatan tentang metode, bukan benchmark siap pakai.
Untuk hubungannya dengan business case yang diminta pembeli, lihat pembahasan Kirkpatrick dan Phillips di membuktikan ROI pelatihan.
Keterlibatan di berbagai jenis produk
Metrik yang tepat bergeser sesuai model penyampaian.
Katalog mandiri hidup atau mati karena awal, kembali, dan penyelesaian. Orang bisa pergi tanpa ada yang menyadari, jadi metrik sesi awal paling penting. Lihat pembelajaran berbasis kohort vs mandiri untuk mengapa penyelesaian sangat berbeda antara kedua format.
Program kohort memiliki struktur kehadiran dan partisipasi yang alami. Kehadiran sesi langsung, pengumpulan tugas, dan interaksi sesama peserta dapat diukur dan bermakna, dan penurunan dari minggu ke minggu mudah dikenali. Fitur komunitas menambahkan sinyalnya sendiri, dibahas di komunitas belajar.
Produk microlearning dan penguatan menghasilkan banyak event kecil. Godaannya adalah melaporkan pembukaan dan streak. Ukuran yang lebih baik adalah akurasi pengambilan kembali pada percobaan berjarak dan apakah perilaku yang dituju berubah, seperti dibahas di microlearning dan di pengulangan berjarak dan kurva lupa.
Penerapan LMS dan LXP di dalam perusahaan memiliki pertanyaan pembeli yang berbeda: apakah ada yang memakai apa yang kita beli? Kategorinya tumpang tindih tetapi ekspektasi keterlibatannya tidak, seperti diuraikan di LMS vs LXP. Platform yang digerakkan peserta didik dinilai dari penggunaan sukarela, sedangkan LMS kepatuhan dinilai dari penyelesaian tepat waktu.
Produk langganan dan berharga berbasis penggunaan mengaitkan keterlibatan langsung dengan pendapatan: keterlibatan rendah cenderung muncul sebagai churn saat perpanjangan, dan penagihan berdasarkan peserta didik aktif menjadikan definisi "aktif" sebagai istilah komersial, bukan hanya pilihan analitik.
Menangkap data: xAPI dan desain event
Sebagian besar platform merekam event dasar secara bawaan, seperti login, tampilan halaman, dan penyelesaian. Pengukuran yang lebih kaya membutuhkan desain event yang konsisten. xAPI (Experience API) adalah standar yang disetujui IEEE, IEEE 9274.1.1, untuk merekam pengalaman belajar sebagai pernyataan sederhana dengan pola aktor, kata kerja, dan objek, yang disimpan di Learning Record Store (xAPI.com). Standar ini dapat menangkap aktivitas dari luar pemutar kursus, seperti simulasi, aplikasi seluler, atau tugas di tempat kerja.
Anda tidak memerlukan standar untuk memulai, tetapi Anda memerlukan kamus event tertulis yang singkat: apa nama tiap event, kapan dipicu, dan apa yang dihitungnya. Tanpa itu, dua dashboard akan melaporkan dua "peserta didik aktif" yang berbeda dari data yang sama.
Privasi dan pengukuran yang bertanggung jawab
Metrik keterlibatan adalah data pribadi tentang orang yang dapat diidentifikasi, dan aturannya bergantung pada siapa peserta didik Anda.

Di AS, FERPA melindungi privasi catatan pendidikan siswa dan berlaku untuk lembaga dan institusi pendidikan yang menerima dana federal tertentu, dengan persyaratan yang meluas ke penerima secara keseluruhan, termasuk departemen di dalam universitas (U.S. Department of Education, FERPA). Jika produk Anda melayani sekolah atau universitas, data peserta didik yang Anda pegang atas nama mereka biasanya termasuk dalam cakupan melalui kontrak dengan institusi. Pelatihan korporat umumnya tidak tercakup FERPA, meskipun hukum ketenagakerjaan dan privasi negara bagian mungkin berlaku.
Di UE dan Inggris, GDPR berlaku untuk data pribadi orang di yurisdiksi tersebut di mana pun perusahaan Anda berada. Article 5 menetapkan prinsip yang paling relevan untuk analitik: pembatasan tujuan (mengumpulkan untuk tujuan yang spesifik dan eksplisit), minimisasi data (memadai, relevan, dan dibatasi pada apa yang diperlukan), pembatasan penyimpanan, dan keamanan (GDPR Article 5).
Kebiasaan praktis yang mengikuti dari ini:
- Tentukan tujuan sebelum mengumpulkan. "Untuk mengenali peserta didik yang macet di minggu pertama agar kami bisa membantu mereka" adalah tujuan. "Semuanya, kalau-kalau berguna" bukan.
- Kumpulkan apa yang dibutuhkan metrik. Waktu pengerjaan tidak memerlukan perekaman tingkat ketukan tombol.
- Bersikap transparan kepada peserta didik tentang apa yang dilacak dan siapa yang melihatnya.
- Pisahkan dukungan dari pengawasan. Memakai data keterlibatan untuk menawarkan bantuan berbeda dari memakainya untuk memeringkat atau mendisiplinkan individu. Di tempat kerja, mengaitkan aktivitas belajar dengan penilaian kinerja mengubah perilaku peserta didik dan dapat membuat mereka memanipulasi angka.
- Tetapkan batas retensi dan hapus atau agregasikan data yang tidak lagi Anda perlukan.
- Konsultasikan dengan penasihat hukum untuk situasi Anda sendiri. Artikel ini adalah rujukan umum, bukan nasihat hukum.
Susunan pengukuran sederhana
Untuk tim yang mulai dari nol, minimum yang dapat dijalankan terlihat seperti ini.
- Satu definisi tertulis tentang peserta didik aktif, terkait dengan tindakan yang bermakna.
- Tiga indikator utama: memulai dalam N hari setelah pendaftaran, sesi kedua, percobaan asesmen pertama.
- Dua ukuran hasil: penyelesaian dengan asesmen, dan satu hasil yang terkait dengan apa yang diinginkan pembeli, seperti pemeriksaan keterampilan atau metrik pekerjaan.
- Satu ukuran sentimen, dengan tingkat respons ditampilkan di sebelah skor.
- Tinjauan mingguan per segmen, bukan hanya rata-rata gabungan.
- Catatan privasi yang menyatakan tujuan, retensi, dan siapa yang memiliki akses.
Itu cukup untuk mengambil keputusan. Tambahkan lebih banyak hanya ketika pertanyaan tertentu membutuhkannya.
Bacaan Terkait

Co-Founder & COO
On this page
- Fakta Utama
- Apa arti "keterlibatan"
- Metrik inti
- Indikator utama dan indikator tertinggal
- Vanity metric
- Apakah keterlibatan memprediksi hasil belajar?
- Keterlibatan di berbagai jenis produk
- Menangkap data: xAPI dan desain event
- Privasi dan pengukuran yang bertanggung jawab
- Susunan pengukuran sederhana
- Bacaan Terkait