Bab 5

Manajemen Risiko

Tenaga KependidikanPimpinan

Pemanfaatan KAG di lingkungan perguruan tinggi harus dikelola melalui pendekatan manajemen risiko yang terintegrasi, proporsional, adaptif, dan berkelanjutan, agar manfaatnya bagi pelaksanaan tridharma dan tata kelola perguruan tinggi lebih besar daripada potensi risiko dan dampak negatif yang mungkin ditimbulkan. Dalam pelaksanaannya, manajemen risiko tersebut harus tetap menjunjung asas kemanusiaan, keadilan, keamanan, integritas akademik, perlindungan data, serta kepatuhan terhadap peraturan perundang-undangan.

5.1 Kebijakan dan Siklus Pengelolaan

Perguruan tinggi menetapkan mekanisme manajemen risiko atas pemanfaatan KAG pada seluruh siklus penggunaannya, mulai dari perencanaan, pengadaan atau pengembangan, penerapan, pemantauan, evaluasi, sampai dengan penghentian penggunaan, sehingga setiap tahapan berada dalam kendali institusi yang jelas.

Kebijakan dan siklus pengelolaan menerapkan End-to-End Lifecycle Governance, yang meliputi:

Pengelolaan risiko mencakup seluruh siklus: perencanaan hingga penghentian.

Pengambilan keputusan berbasis tingkat risiko (low–high risk).

Setiap tahapan memiliki penanggung jawab yang jelas.

Selaras dengan regulasi, kebijakan internal, dan etika akademik.

Proses penggunaan KAG dapat ditelusuri dan diaudit melalui rekam jejak audit sistem elektronik. Rekam jejak audit sistem elektronik digunakan untuk keperluan pengawasan, penegakan hukum, penyelesaian sengketa, verifikasi, pengujian, dan pemeriksaan lainnya (PP No. 71 Tahun 2019, Pasal 22 ayat (2)). Rekam jejak tersebut tidak digunakan untuk memantau perilaku individu di luar keperluan tersebut.

Penggunaan KAG tetap dalam kendali manusia.

5.2 Pemetaan Konteks Penggunaan

Setiap pemanfaatan KAG didasarkan pada kejelasan tujuan, konteks penggunaan, data yang digunakan, pihak yang terdampak, manfaat yang diharapkan, keterbatasan sistem, serta risiko yang berpotensi muncul, baik terhadap proses akademik, layanan, maupun pengambilan keputusan di lingkungan perguruan tinggi, dengan memenuhi kriteria berikut:

Setiap penggunaan KAG harus memiliki tujuan yang spesifik dan terukur.

Penggunaan KAG disesuaikan dengan konteks (pembelajaran, riset, administrasi).

Sumber, jenis, dan kualitas data yang digunakan harus jelas.

Mengidentifikasi siapa saja yang terdampak (mahasiswa, dosen, institusi, alumni, stakeholder, dan lainnya).

Memahami bahwa KAG memiliki keterbatasan (bias, hallucination, error).

Penggunaan KAG harus memberikan nilai tambah yang nyata.

5.3 Klasifikasi Tingkat Risiko dan Pengendalian Proporsional

Perguruan tinggi menetapkan klasifikasi tingkat risiko pemanfaatan KAG dengan memperhatikan sensitivitas data, cakupan penggunaan, tingkat ketergantungan pada sistem, serta pengaruhnya terhadap proses akademik, layanan, pengambilan keputusan, hak-hak pihak yang terdampak, dan potensi terjadinya bias atau diskriminasi. Tingkat risiko tersebut menjadi dasar dalam menetapkan bentuk pengendalian yang proporsional. Klasifikasi tingkat risiko dapat terdiri dari:

  1. Risk-based approach: tingkat kontrol disesuaikan dengan tingkat risiko.

  2. Proporsionalitas: semakin tinggi risiko, semakin ketat pengendalian.

  3. Kontekstual: mempertimbangkan konteks penggunaan (akademik, riset, layanan).

  4. Dampak & probabilitas: klasifikasi berdasarkan besarnya dampak dan kemungkinan terjadi.

  5. Dinamis: dapat berubah sesuai evaluasi dan perkembangan penggunaan.

Penentuan tingkat risiko didasarkan pada:

Sensitivitas data (publik, internal, rahasia).

Dampak keputusan (non-kritis hingga strategis).

Tingkat otonomi KA.

Potensi bias dan kesalahan.

Dampak terhadap stakeholder.

5.4 Evaluasi Keandalan, Keamanan, dan Kepatuhan

Perguruan tinggi melakukan evaluasi dan pengendalian secara berkala untuk memastikan bahwa pemanfaatan KAG tetap andal, aman, menjaga kerahasiaan dan privasi data, meminimalkan bias, dapat dipertanggungjawabkan, serta selaras dengan tujuan penggunaannya dan ketentuan yang berlaku. Dalam hal menggunakan layanan dari pihak ketiga, perguruan tinggi juga perlu memahami secara memadai limitasi sistem dan reliabilitas data yang menjadi dasar bekerjanya layanan tersebut.

Evaluasi keandalan, keamanan, dan kepatuhan memenuhi beberapa aspek penting sebagai berikut:

Menjamin keamanan sistem dan perlindungan data.

Pemantauan dilakukan secara berkelanjutan.

Terintegrasi dengan manajemen risiko, IT governance, dan data governance.

Implementasi dilakukan secara bertahap dan terkontrol.

5.5 Pengawasan Manusia dan Akuntabilitas Penggunaan

Pemanfaatan KAG untuk fungsi atau keputusan yang berdampak signifikan terhadap individu, proses akademik, penelitian, layanan, atau kebijakan institusi harus tetap berada dalam pengawasan manusia yang memadai. Sivitas akademika tetap bertanggung jawab atas keabsahan, integritas, dan konsekuensi dari data, informasi, atau pengetahuan yang diperoleh melalui pemanfaatan KAG. Kriteria dalam aspek ini sebagai berikut:

  1. Ada pihak yang bertanggung jawab atas penggunaan KAG.

  2. Keputusan berbasis KAG tetap dapat dipertanggungjawabkan.

  3. KAG digunakan sebagai alat bantu, bukan pengganti keputusan manusia.

  4. Validasi hasil tetap dilakukan oleh pengguna.

Tanggung jawab validasi oleh pengguna diimbangi dukungan institusi, misalnya penyediaan aplikasi KAG resmi yang aman, akses ke sumber rujukan ilmiah untuk keperluan verifikasi, dan ketersediaan pendampingan.

5.6 Insiden, Umpan Balik, dan Perbaikan Berkelanjutan

Perguruan tinggi menyediakan mekanisme pemantauan, pelaporan insiden, penanganan keluhan, dan ruang umpan balik bagi pihak internal maupun eksternal yang terdampak oleh pemanfaatan KAG. Hasil pemantauan dan umpan balik tersebut menjadi dasar bagi tindak lanjut perbaikan, penguatan pengendalian, atau penghentian penggunaan apabila diperlukan dengan memenuhi kriteria berikut ini:

Pemantauan dilakukan secara berkelanjutan.

Evaluasi dan perbaikan berkala.

Tidak berjalan terpisah dari sistem institusi.

Memiliki mekanisme penghentian (exit strategy) yang jelas.

5.7 Keterkaitan Pemetaan Risiko dan Pengendalian

Setiap risiko yang dipetakan pada Bab 3 perlu memiliki pengendalian yang jelas. Tabel berikut menghubungkan risiko pada Bab 3 dengan pengendalian minimum dan bab yang mengaturnya. Tingkat risiko masing-masing penggunaan ditetapkan melalui klasifikasi pada Bab 5.3, dan pengendalian yang diterapkan disesuaikan dengan tingkat risiko tersebut. Perguruan tinggi dapat menambahkan risiko dan pengendalian lain sesuai konteksnya.

Risiko (Bab 3)Pengendalian MinimumRujukan
A. Pembelajaran (Bab 3.1a)
Penurunan integritas akademikBatas penggunaan KAG ditetapkan dalam RPS; keterbukaan penggunaan; asesmen terkontrolBab 4.6; Bab 6.4a
Tuduhan keliru akibat alat deteksi KAGSkor detektor bukan bukti tunggal; pemeriksaan riwayat draf dan klarifikasi; hak keberatanBab 4.6 butir d–f
Ketergantungan kognitifZona Bebas AI pada asesmen mata kuliah fondasi; izin penggunaan dibuka bertahapBab 6.4a
Ketimpangan aksesLayanan KAG resmi yang setara; alternatif tanpa AIBab 4.3; Bab 7.9
Materi tidak tervalidasi (halusinasi)Verifikasi oleh dosen; RAG berbasis sumber terkurasi; verifikasi hitungan dan kodeBab 3.2a; Bab 6.4a
Standarisasi dan personalisasi yang biasPemeriksaan bias keluaran; pengawasan dosen atas sistem adaptifBab 5.4; Bab 6.4a
Degradasi peran dosenPenguatan kapasitas dosen sebagai perancang dan validator pembelajaranBab 6.3a; Bab 7.4
Belum ada standar penggunaan KAG di kelasKetentuan penggunaan KAG per tugas dan ujian dalam RPSBab 6.4a; Bab 7.6
B. Penelitian dan Pelayanan (Bab 3.1b)
Plagiarisme dan authorship ambiguityKAG tidak dicantumkan sebagai penulis; pernyataan penggunaan KAGBab 4.9 butir e
Validitas ilmiah tergangguVerifikasi sumber asli; RAG; dokumentasi penggunaan KAG dalam metodeBab 3.2a; Bab 6.4b
Kebocoran data penelitianKlasifikasi data; larangan unggah ke layanan publik; ketentuan vendorBab 4.5 butir d–g
Bias dalam analisis dataAudit data dan evaluasi fairness berkalaBab 3.2e; Bab 5.4
Hilangnya kendali pada agentic AIPembatasan kewenangan; persetujuan manusia untuk tindakan berdampak; pencatatan tindakanBab 4.9 butir h; Bab 5.5
Ketidakjelasan status hak ciptaHak melekat pada kontribusi manusia; aturan kepemilikan internal; batas penggunaan materi berhak ciptaBab 4.9 butir e–f
Pelanggaran etik subjek manusiaPersetujuan etik; informed consent yang menyebut pemrosesan oleh KAGBab 4.9 butir g
Risiko pengabdian masyarakat (konteks lokal, eksklusi, kepercayaan publik, ketergantungan)Penilaian relevansi konteks lokal; pendampingan dan penguatan kapasitas masyarakatBab 6.4b
C. Manajemen dan Tata Kelola (Bab 3.1c)
Keputusan berbasis KAG yang tidak transparanKeputusan akhir oleh manusia; mekanisme peninjauan ulang (contestability)Bab 4.10 butir g; Bab 5.5
Keamanan dan privasi dataKlasifikasi data; pengamanan sistem; penilaian dampak pelindungan data pribadiBab 3.2b; Bab 4.5
Biaya tinggi dan vendor lock-inPertimbangan cost-benefit; standar terbuka dan strategi multi-vendor; pengaturan pihak ketigaBab 6.4c; Bab 7.11
Kepatuhan regulasiEvaluasi kepatuhan berkalaBab 5.4; Bab 7.2
Evaluasi kinerja yang biasDiperlakukan sebagai penggunaan berisiko tinggi; pengawasan manusiaBab 5.3; Bab 5.5
Resistensi, kesenjangan kompetensi, dan kebutuhan reskillingKompetensi minimum dan pelatihan berjenjangBab 6; Bab 7.4
D. Teknologi dan Data (Bab 3.2)
Halusinasi termasuk numerik dan kodeMitigasi berlapis (RAG, verifikasi hitungan, uji kode, pemeriksaan tenaga ahli)Bab 3.2a
Serangan siber (prompt injection, data poisoning, model inversion)Guardrails, sanitasi masukan, pengendalian data, pengujian keamananBab 3.2b
Fragmentasi integrasi sistemPerencanaan arsitektur integrasiBab 6.4c; Bab 7.4
Kualitas dan bias dataValidasi, pembersihan, dan standardisasi data; audit fairnessBab 3.2c; Bab 3.2e