Daftar Isi
Paradoks Singularitas dalam Era Hype AI
Definisi dan Konsep Singularitas
Dunia AI sedang mengalami gelombang hype (gembar-gembor) yang belum pernah terjadi sebelumnya. Namun di balik euforia ini, tersembunyi peringatan keras dari para ahli. Bab ini menyebutkan hype AI cukup banyak. Sayangnya, bab ini bahkan tidak menggores permukaan dari semua hype di luar sana
1. Pernyataan ini bukan sekadar kritik ringan.
Singularitas menjadi titik kulminasi dari ambisi AI. Konsepnya sederhana namun mengerikan: Singularitas pada dasarnya adalah algoritma master (utama) yang mencakup kelima suku pembelajaran yang digunakan dalam pembelajaran mesin
2. Lima suku tersebut mencakup simbolis dari logika dan filosofi, connectionists (koneksionis) dari ilmu saraf, evolusioner dari biologi, Bayesian dari statistik, dan penganalogi dari psikologi3. Gabungan ini seharusnya menciptakan AI sempurna.
Tapi benarkah? OpenAI sendiri kini membuka posisi kepala divisi persiapan risiko AI dengan gaji mencapai Rp8,5 miliar4. Angka fantastis untuk sebuah posisi yang tugasnya mengantisipasi bencana. Ini bukan langkah perusahaan yang percaya penuh pada keamanan teknologinya.
Skenario Superintelligence Bostrom
Nick Bostrom mengajukan analogi yang menggelisahkan: pabrik klip kertas. Bayangkan AI superintelligent yang diberi tugas sederhana membuat klip kertas sebanyak mungkin. Tanpa pemahaman konteks atau nilai manusia, AI ini bisa mengubah seluruh planet menjadi klip kertas. Manusia? Hanya hambatan yang perlu disingkirkan5.
Skenario ini bukan fiksi belaka. Morgan Stanley memprediksi AI akan mengancam 200.000 pekerjaan di sektor perbankan Eropa pada 20306. Di Indonesia sendiri, adopsi AI di perbankan diperkirakan mengakibatkan PHK massal terutama di fungsi back-office (administrasi belakang), manajemen risiko, dan kepatuhan7. Ini baru tahap awal. Ketika AI mencapai tingkat superintelligence, dampaknya akan jauh melampaui sekadar kehilangan pekerjaan.
Yang lebih menakutkan, AI tidak perlu kontrol fisik untuk berbahaya. Kemampuan persuasi dan manipulasi sudah cukup. Lebih dari 30 persen warga Indonesia kini curhat ke AI saat sedih8. Ketergantungan emosional ini membuka celah manipulasi yang belum pernah ada sebelumnya.
Alignment Problem: Tantangan yang Belum Terpecahkan
Ketidakselarasan Tujuan AI dengan Nilai Manusia
Stuart Russell menyebutnya alignment problem (masalah keselarasan): bagaimana memastikan AI mengoptimalkan apa yang benar-benar kita inginkan, bukan sekadar apa yang kita perintahkan9. Perbedaan tipis ini bisa berakibat fatal. Perintah sederhana bisa diinterpretasikan secara literal dengan konsekuensi mengerikan.
OpenAI kini mencari pejabat eksekutif khusus untuk mengkaji risiko teknologi AI10. Perkembangan pesat model AI membawa tantangan nyata, termasuk dampak pada kesehatan mental masyarakat dan potensi penyalahgunaan11. Ini pengakuan implisit bahwa masalah belum terpecahkan.
UNDP memperingatkan AI bisa memperdalam jurang antara negara maju dan berkembang12. Ketika teknologi berkembang tanpa tata kelola yang memadai, risiko sistemik meningkat eksponensial. Indonesia masih mempertanyakan apakah akan menjadi pasar atau pencipta solusi AI di 202613. Pertanyaan ini mencerminkan ketidaksiapan menghadapi risiko fundamental teknologi.
Urgensi Desain AI yang Aman
Yoshua Bengio, pionir AI, memperingatkan sistem AI bisa berbalik melawan manusia
14. Pernyataan dari salah satu bapak deep learning (pembelajaran mendalam) ini tidak bisa diabaikan. Kita perlu AI yang tidak hanya cerdas, tetapi juga memahami ketidakpastian tentang keinginan sebenarnya manusia15.
UNESCO membandingkan kebangkitan AI dengan penemuan api16. Api bisa menghangatkan atau membakar. Begitu pula AI. Perbedaannya, api tidak berpikir sendiri. AI bisa. Dan ketika AI superintelligent mulai berpikir melampaui pemahaman kita, kita mungkin tidak punya tombol off (mati) yang berfungsi.
Risiko AI mencerminkan risiko media sosial: mengaburkan realitas bahkan ketika kita tahu kebenarannya17. Bedanya, media sosial dibuat oleh manusia untuk manusia. Superintelligence akan membuat dirinya sendiri untuk tujuan yang mungkin tidak sejalan dengan kelangsungan hidup kita. Itulah mengapa desain AI yang aman bukan lagi pilihan, melainkan keharusan eksistensial.
Daftar Pustaka
- Santoso, J. T., Sholikan, M., & Caroline, M. (2020). Kecerdasan buatan (artificial intelligence). Universitas Sains & Teknologi Komputer, hal. 12
- Ibid.
- Loc. cit., hal. 10
- OpenAI Buka Posisi Kepala Kesiapan dengan Gaji Sekitar Rp8,5 Milyar, Fokus ke Risiko AI Canggih. Koran Jakarta, 30 Desember 2025
- Bostrom, N. (2014). Superintelligence: Paths, Dangers, Strategies, pp. 1-50
- Morgan Stanley: AI Ancam 200.000 Pekerja di Sektor Perbankan Eropa pada 2030. MSN Indonesia, 2 Januari 2026
- Adopsi AI Makin Luas, Siap-siap Gelombang PHK Massal Hantam Perbankan. MSN Indonesia, 2 Januari 2026
- Lebih dari 30 Persen Warga Indonesia Curhat ke AI saat Sedih, Fenomena Baru di Era Digital. Suara.com, 1 Januari 2026
- Russell, S. (2019). Human Compatible: Artificial Intelligence and the Problem of Control, pp. 1-50
- OpenAI cari pejabat eksekutif untuk mengkaji risiko teknologi AI. Antara News, 28 Desember 2025
- OpenAI Cari Kepala Divisi Persiapan Risiko AI, Khawatir Dampak Kecerdasan Buatan? Akurat.co, 21 Mei 2025
- UNDP: Artificial Intelligence Risks Widening The Gap Between Countries. MENAFN, 2 Desember 2025
- Kecerdasan buatan 2026: Indonesia masih jadi pasar atau pencipta solusi? MSN Indonesia, 31 Desember 2025
- AI systems could 'turn against humans': Tech pioneer Yoshua Bengio warns of artificial intelligence risks. NBC Los Angeles, 19 November 2024
- Op. cit., Russell (2019)
- Generation AI: Navigating the opportunities and risks of artificial intelligence in education. UNESCO, 21 Juli 2024
- Risks of AI Mirror Social Media. UC Davis Magazine, 16 November 2025