Cloudflare baru saja mengumumkan temuan besar yang cukup mengguncang dunia internet. Selama lima bulan terakhir, perusahaan tersebut telah memblokir 416 miliar permintaan scraping yang dilakukan oleh bot-bot AI. Angka ini bukan hanya menunjukkan betapa agresifnya perusahaan-perusahaan AI mencoba mengumpulkan data, tetapi juga menggambarkan perubahan besar dalam dinamika internet modern. Pemblokiran masif ini terjadi setelah Cloudflare meluncurkan fitur baru yang secara otomatis menolak akses dari crawler AI, kecuali jika perusahaan AI tersebut bersedia membayar untuk mengakses konten yang ada di website pengguna Cloudflare.

Menurut CEO Cloudflare, perkembangan ini menjadi sinyal bahwa model bisnis internet sedang memasuki era baru. Selama dua dekade terakhir, internet hidup dari sebuah siklus sederhana: orang membuat konten, konten mendatangkan traffic, dan traffic menghasilkan uang melalui iklan atau penjualan produk. Namun, kemunculan AI mengubah hal tersebut secara drastis. Kini, bukan manusia yang membaca website, tetapi algoritma besar yang mengumpulkan data dalam jumlah tak terbayangkan. Jika perusahaan-perusahaan AI bebas mengambil konten tanpa kompensasi, kreator dan publisher yang bekerja keras membuat konten menjadi tidak mendapatkan imbalan apa pun. Mereka menciptakan nilai, tetapi pihak lain yang memanen keuntungan.

Situasi ini semakin pelik karena meskipun Cloudflare bisa memblokir hampir semua bot AI, Google menjadi pengecualian besar. Google menggabungkan crawler pencarian tradisional dan crawler AI miliknya menjadi satu sistem. Artinya, jika sebuah website memutuskan untuk menolak kedatangan crawler AI Google, itu sama saja dengan menolak crawler pencarian Google. Konsekuensinya fatal: website tersebut akan hilang dari hasil pencarian. CEO Cloudflare bahkan menyebut langkah ini sebagai strategi Google untuk mempertahankan dominasinya — sebuah cara membawa monopoli lama mereka ke era kecerdasan buatan.

Di tengah persaingan tersebut, ada masalah fundamental lainnya: AI sangat membutuhkan konten buatan manusia. Tanpa konten asli, kualitas AI akan merosot karena model dilatih menggunakan data yang sudah didaur ulang oleh AI lain. Ini seperti membuat salinan dari salinan sampai hasilnya tidak lagi jelas. Di sisi lain, fitur ringkasan AI yang kini muncul di berbagai platform pencarian membuat pengguna tidak lagi mengunjungi website secara langsung. Trafik pun turun, pendapatan dari iklan menurun, dan media atau kreator yang menggantungkan hidup pada traffic menjadi yang paling terdampak. Inilah alasan mengapa konsep lisensi konten mulai banyak dibicarakan. Para kreator menuntut agar perusahaan AI membayar atas data yang mereka gunakan.

Cloudflare sebagai pemain besar di bidang keamanan dan jaringan internet tentu memiliki kepentingan tersendiri. Jika internet dipenuhi konten orisinal dan website terus berkembang, maka kebutuhan akan perlindungan jaringan semakin besar. Hal itu secara langsung menguntungkan Cloudflare, apalagi perusahaan ini kini telah menguasai sekitar 80% pasar Content Delivery Network (CDN) di dunia. Setiap website baru, setiap aplikasi besar, dan setiap platform online pada akhirnya membutuhkan layanan seperti milik Cloudflare.

Namun, ada satu persoalan yang jauh lebih besar dan bersifat global: ketergantungan internet dunia pada segelintir perusahaan raksasa. Infrastruktur digital di seluruh dunia kini bertumpu pada AWS, Azure, Cloudflare, CrowdStrike, Google, dan beberapa nama besar lainnya. Ketergantungan ekstrem ini berarti satu kesalahan kecil saja dapat mengakibatkan bencana digital yang meluas. Dan ini bukan sekadar ancaman teori — hal tersebut sudah pernah terjadi. Hanya karena satu file konfigurasi yang keliru, ratusan ribu website sempat tumbang, perusahaan rugi miliaran, dan layanan penting di banyak negara tidak dapat diakses.

Fenomena 416 miliar permintaan scraping yang diblokir Cloudflare hanyalah bagian kecil dari cerita besar tentang bagaimana internet sedang berubah. Kita sedang memasuki masa di mana persaingan antara konten manusia dan mesin, antara kreator dan perusahaan AI, dan antara platform independen dan raksasa teknologi global akan menentukan arah masa depan internet. Tantangannya besar, tetapi peluangnya juga tidak kalah besar — selama ekosistem digital tetap memberikan ruang yang adil bagi mereka yang menciptakan nilai asli di dunia maya.

Cloudflare baru saja mengungkapkan bahwa dalam lima bulan terakhir mereka telah memblokir 416 miliar permintaan scraping dari bot-bot AI. Lonjakan ini muncul setelah Cloudflare merilis fitur otomatis yang menolak crawler AI, kecuali jika perusahaan AI tersebut membayar untuk mengakses konten situs para pengguna.

Cloudflare baru saja mengumumkan temuan besar yang cukup mengguncang dunia internet. Selama lima bulan terakhir, perusahaan tersebut telah memblokir 416 miliar permintaan scraping yang dilakukan oleh bot-bot AI. Angka ini bukan hanya menunjukkan betapa agresifnya perusahaan-perusahaan AI mencoba mengumpulkan data, tetapi juga menggambarkan perubahan besar dalam dinamika internet modern. Pemblokiran masif ini terjadi setelah Cloudflare meluncurkan fitur baru yang secara otomatis menolak akses dari crawler AI, kecuali jika perusahaan AI tersebut bersedia membayar untuk mengakses konten yang ada di website pengguna Cloudflare.

Menurut CEO Cloudflare, perkembangan ini menjadi sinyal bahwa model bisnis internet sedang memasuki era baru. Selama dua dekade terakhir, internet hidup dari sebuah siklus sederhana: orang membuat konten, konten mendatangkan traffic, dan traffic menghasilkan uang melalui iklan atau penjualan produk. Namun, kemunculan AI mengubah hal tersebut secara drastis. Kini, bukan manusia yang membaca website, tetapi algoritma besar yang mengumpulkan data dalam jumlah tak terbayangkan. Jika perusahaan-perusahaan AI bebas mengambil konten tanpa kompensasi, kreator dan publisher yang bekerja keras membuat konten menjadi tidak mendapatkan imbalan apa pun. Mereka menciptakan nilai, tetapi pihak lain yang memanen keuntungan.

Situasi ini semakin pelik karena meskipun Cloudflare bisa memblokir hampir semua bot AI, Google menjadi pengecualian besar. Google menggabungkan crawler pencarian tradisional dan crawler AI miliknya menjadi satu sistem. Artinya, jika sebuah website memutuskan untuk menolak kedatangan crawler AI Google, itu sama saja dengan menolak crawler pencarian Google. Konsekuensinya fatal: website tersebut akan hilang dari hasil pencarian. CEO Cloudflare bahkan menyebut langkah ini sebagai strategi Google untuk mempertahankan dominasinya — sebuah cara membawa monopoli lama mereka ke era kecerdasan buatan.

Di tengah persaingan tersebut, ada masalah fundamental lainnya: AI sangat membutuhkan konten buatan manusia. Tanpa konten asli, kualitas AI akan merosot karena model dilatih menggunakan data yang sudah didaur ulang oleh AI lain. Ini seperti membuat salinan dari salinan sampai hasilnya tidak lagi jelas. Di sisi lain, fitur ringkasan AI yang kini muncul di berbagai platform pencarian membuat pengguna tidak lagi mengunjungi website secara langsung. Trafik pun turun, pendapatan dari iklan menurun, dan media atau kreator yang menggantungkan hidup pada traffic menjadi yang paling terdampak. Inilah alasan mengapa konsep lisensi konten mulai banyak dibicarakan. Para kreator menuntut agar perusahaan AI membayar atas data yang mereka gunakan.

Cloudflare sebagai pemain besar di bidang keamanan dan jaringan internet tentu memiliki kepentingan tersendiri. Jika internet dipenuhi konten orisinal dan website terus berkembang, maka kebutuhan akan perlindungan jaringan semakin besar. Hal itu secara langsung menguntungkan Cloudflare, apalagi perusahaan ini kini telah menguasai sekitar 80% pasar Content Delivery Network (CDN) di dunia. Setiap website baru, setiap aplikasi besar, dan setiap platform online pada akhirnya membutuhkan layanan seperti milik Cloudflare.

Namun, ada satu persoalan yang jauh lebih besar dan bersifat global: ketergantungan internet dunia pada segelintir perusahaan raksasa. Infrastruktur digital di seluruh dunia kini bertumpu pada AWS, Azure, Cloudflare, CrowdStrike, Google, dan beberapa nama besar lainnya. Ketergantungan ekstrem ini berarti satu kesalahan kecil saja dapat mengakibatkan bencana digital yang meluas. Dan ini bukan sekadar ancaman teori — hal tersebut sudah pernah terjadi. Hanya karena satu file konfigurasi yang keliru, ratusan ribu website sempat tumbang, perusahaan rugi miliaran, dan layanan penting di banyak negara tidak dapat diakses.

Fenomena 416 miliar permintaan scraping yang diblokir Cloudflare hanyalah bagian kecil dari cerita besar tentang bagaimana internet sedang berubah. Kita sedang memasuki masa di mana persaingan antara konten manusia dan mesin, antara kreator dan perusahaan AI, dan antara platform independen dan raksasa teknologi global akan menentukan arah masa depan internet. Tantangannya besar, tetapi peluangnya juga tidak kalah besar — selama ekosistem digital tetap memberikan ruang yang adil bagi mereka yang menciptakan nilai asli di dunia maya.

Situasinya makin rumit karena Cloudflare mampu menahan hampir semua bot AI — kecuali Google. Google menyatukan crawler pencarian dan crawler AI menjadi satu entitas. Akibatnya, jika sebuah website memblokir crawler AI milik Google, situs tersebut justru lenyap dari hasil pencarian. CEO Cloudflare sampai menyebut langkah itu sebagai cara Google mempertahankan monopoli mereka dari masa lalu hingga masa depan.

Di sisi lain, konten asli buatan manusia sangat penting untuk melatih AI. Jika AI hanya belajar dari konten yang juga dibuat AI, kualitas model akan menurun drastis. Sementara itu, fitur ringkasan AI menekan trafik website dan memukul pendapatan media serta kreator yang bergantung pada iklan. Karena itu mulai muncul gagasan lisensi konten, supaya para pembuat konten tetap mendapatkan kompensasi yang adil.

Cloudflare sendiri jelas diuntungkan jika internet tetap dipenuhi konten orisinal. Semakin banyak website berkembang, makin besar pula kebutuhan perlindungan jaringan — dan Cloudflare yang kini memegang sekitar 80% pasar CDN akan jadi pemain yang paling siap.

Namun ada satu masalah besar yang tidak bisa diabaikan: infrastruktur internet dunia kini bergantung pada segelintir raksasa seperti AWS, Azure, Cloudflare, CrowdStrike, dan Google. Jika satu saja mengalami kesalahan kecil, dampaknya bisa terasa secara global — miliaran kerugian dan ratusan ribu website tumbang. Dan hal itu sudah pernah terjadi, hanya karena satu file konfigurasi bermasalah.