Membangun kepercayaan lewat explainability: menjelaskan keputusan sistem berbasis AI, menerapkan transparansi di antarmuka, dan merancang UI XAI untuk fitur klasifikasi otomatis JagaKota.

Setelah di episode 19 kita membangun fondasi privasi, sekarang kita menghadapi tantangan terbaru di 2026: sistem yang mengambil keputusan sendiri. JagaKota mulai memakai AI untuk mengklasifikasikan laporan — "foto ini kemungkinan sampah menumpuk" — dan mengarahkannya ke dinas terkait. Bagaimana pengguna (dan warga) tahu bahwa keputusan itu bisa dipercaya?
Inilah domain XAI (Explainable AI) dari sisi UX. Kepercayaan tidak lahir dari akurasi semata — ia lahir dari pemahaman. Sistem yang transparan soal keputusan dan keterbatasannya justru lebih dipercaya daripada yang tampak sempurna tapi tak bisa dijelaskan.
Menurut prinsip Human-Centered Explainable AI (dari riset rekomendasi NN/g dan akademisi), penjelasan dibutuhkan saat keputusan:
Sebaliknya, menjelaskan setiap langkah (misal "AI mengubah gambar menjadi tensor 224×224") justru menambah beban kognitif (episode 10) tanpa manfaat. Aturannya: jelaskan keputusan, bukan mekanisme.
Kalau tim kalian bingung "seberapa dalam harus menjelaskan", gunakan kerangka ini — semakin besar dampaknya, semakin dalam penjelasannya:
| Tingkat | Isi | Contoh |
|---|---|---|
| 1. Outcome | Apa hasil keputusannya? | "Diklasifikasikan: Sampah menumpuk" |
| 2. Why | Bukti pendukungnya apa? | "Foto menunjukkan tumpukan di trotoar" |
| 3. What-if | Apa yang berubah jika input beda? | "Ubah jadi Lampu Jalan → rute ke dinas lain" |
| 4. Process | Bagaimana sistem bekerja? | (jarang — hanya jika diminta) |
Laporan JagaKota yang otomatis klasifikasinya cukup di tingkat 2; keputusan yang memengaruhi privasi atau penegakan hukum bisa butuh hingga tingkat 3.
Empat pola yang bisa langsung diterapkan:
[ 📸 Foto laporan ]
Kategori terdeteksi otomatis:
Sampah menumpuk (tinggi)
Mengapa: foto menunjukkan tumpukan kantong di pinggir jalan.
Salah? [ Pilih kategori lain ]
[ Kirim Laporan ]Pengguna berhak tahu kapan mereka berhadapan dengan sistem otomatis. Ini momen "transparency" yang juga disinggung di episode 19 — bedanya, di sini yang diungkap adalah keagenan (siapa/apa yang memutuskan), bukan sekadar data.
Note
Kepercayaan tidak sama dengan kepatuhan. Sistem yang selalu disetujui pengguna bisa jadi sistem yang hanya "dianggap benar" — atau yang dipakai pengguna tanpa berpikir (automation bias). Tujuan explainability adalah pemahaman yang sehat, bukan penerimaan buta. Ukur: apakah pengguna bisa menyebut kapan sistem salah?
Kesalahan terbesar perancang XAI adalah menyembunyikan ketidakpastian demi tampak pintar. Desain yang jujur menampilkan apa yang tidak diketahui:
Inti yang harus dibawa pulang:
Di episode 21 selanjutnya kita akan membahas agentic UX dan GenUI — mendesain untuk AI agent dan antarmuka generatif — dan merancang pengalaman delegasi tugas untuk JagaKota. Sampai jumpa di episode 21!