Singularitas, dalam konteks AI, adalah peristiwa teoretis di mana sistem cerdas dengan kriteria berikut digunakan.
- Mampu meningkatkan jangkauan kecerdasannya sendiri atau menggunakan sistem lain dengan jangkauan yang ditingkatkan tersebut
- Bersedia atau dipaksa untuk melakukannya
- Mampu melakukannya tanpa adanya pengawasan manusia
- Versi yang ditingkatkan mendukung kriteria (1) hingga (3) secara rekursif
Dengan induksi, teori kemudian memprediksi bahwa urutan peristiwa akan dihasilkan dengan tingkat peningkatan kecerdasan potensial yang mungkin jauh melebihi tingkat potensial evolusi otak.
Betapa diwajibkannya entitas yang berkembang sendiri atau populasi entitas yang diproklamasikan ini untuk melindungi kehidupan manusia dan kebebasan tidak dapat ditentukan. Gagasan bahwa kewajiban semacam itu dapat menjadi bagian dari kontrak perangkat lunak yang tidak dapat dibatalkan adalah naif mengingat sifat kemampuan yang terkait dengan kriteria (1) sampai (4) di atas. Seperti halnya teknologi canggih lainnya, risikonya sangat banyak dan berjangkauan luas seperti manfaat potensial.
Risiko terhadap kemanusiaan tidak membutuhkan kecerdasan. Ada konteks lain untuk penggunaan istilah singularitas, tetapi mereka berada di luar ruang lingkup forum AI ini tetapi mungkin layak disebutkan secara singkat untuk kejelasan. Rekayasa genetika, rekayasa nuklir, globalisasi, dan mendasarkan ekonomi internasional pada sumber energi yang terbatas dikonsumsi ribuan kali lebih cepat daripada yang muncul di bumi - Ini adalah contoh lain dari teknologi berisiko tinggi dan tren massa yang menimbulkan risiko serta manfaat untuk kemanusiaan.
Kembali ke AI, peringatan utama dalam teori singularitas adalah kegagalannya untuk memasukkan probabilitas. Meskipun dimungkinkan untuk mengembangkan entitas yang sesuai dengan kriteria (1) hingga (4) di atas, itu mungkin cukup mustahil sehingga peristiwa pertama terjadi lama setelah semua bahasa yang digunakan saat ini di Bumi mati.
Pada ekstrim lain dari distribusi probabilitas, orang dapat dengan mudah berpendapat bahwa ada probabilitas nol bahwa peristiwa pertama sudah terjadi.
Sejalan dengan itu, jika kehadiran yang lebih cerdas di mana sudah ada di Internet, seberapa besar kemungkinan ia akan menemukannya dalam kepentingan terbaiknya untuk mengungkapkan dirinya kepada umat manusia yang lebih rendah. Apakah kita memperkenalkan diri kepada belatung yang lewat?