Cloudflare, hem arama motorları için indeksleme yapan hem de yapay zeka modellerini eğiten web tarayıcılarına karşı yeni bir adım attı. Şirket, bu tür "karma kullanım" tarayıcılarını varsayılan olarak engellemeye hazırlanıyor. Daha önce isteğe bağlı sunulan koruma sistemi artık yeni sitelerde otomatik olarak devreye girecek.
Varsayılan ayarlar değişiyor
Cloudflare bugüne kadar internet sitesi sahiplerine, yapay zeka sohbet botlarının içerik toplamasını engelleme seçeneği sunuyordu. Yeni kararla birlikte şirket daha sıkı bir politika izleyecek.
Cloudflare CEO'su Matthew Prince, internet trafiğinin büyük bölümünü artık insanların değil otomatik botların oluşturduğunu belirtti. Prince'e göre yeni sistem, hem internet sitelerine daha fazla kontrol sağlayacak hem de yapay zeka şirketlerinin hangi amaçla veri topladığını daha açık hale getirecek.
Yeni dönem 15 Eylül'de başlıyor
15 Eylül 2026'dan itibaren Cloudflare'a yeni katılan müşteriler ile mevcut abonelerin oluşturacağı yeni internet sitelerinde yeni kurallar otomatik olarak uygulanacak.
Bu sistemde arama motorlarının sayfaları indekslemesine izin verilecek. Ancak reklam bulunan sayfalarda yapay zeka eğitimi veya AI ajanları için veri toplayan tarayıcılar varsayılan olarak engellenecek.
Karma kullanım yapan ve site sahiplerine ayrı bir tercih sunmayan tarayıcılar da aynı şekilde engellenecek. Ücretsiz Cloudflare kullanıcıları da belirtilen tarihe kadar ayarlarını değiştirmezse bu sisteme otomatik olarak geçirilecek.
Pay Per Crawl yerini Pay Per Use'a bırakıyor
Cloudflare, 2025 yılında duyurduğu Pay Per Crawl sistemini de yeniledi. Yeni sistem artık Pay Per Use adıyla kullanılacak.
Eski modelde internet siteleri, yapay zeka şirketleri içeriklerini taradığında ödeme alıyordu. Yeni sistemde ise ödeme, içerik bir yapay zeka sohbet botunun cevabında kullanıldığında yapılacak.
Cloudflare şimdilik Ceramic.AI ve You.com ile çalıştığını açıkladı. Şirket, ilerleyen dönemde daha fazla yapay zeka firmasının bu sisteme katılmasını bekliyor.
Google'a dolaylı mesaj
Cloudflare'ın duyurusunda dikkat çeken noktalardan biri de Google'a yönelik dolaylı eleştiriler oldu.
Şirkete göre en büyük arama motoru, diğer yapay zeka şirketlerine kıyasla yaklaşık iki kat daha fazla veriye erişebiliyor. Bunun nedeni ise aynı tarayıcının hem arama sonuçlarını oluşturması hem de yapay zeka sistemleri için veri toplaması.
Google'ın Googlebot adlı tarayıcısı, internet sitelerini arama sonuçları için indekslerken aynı zamanda Gemini ve AI Overviews gibi yapay zeka özelliklerine de veri sağlıyor. Google, yalnızca klasik arama sonuçları için çalışan Google-Extended adlı ayrı bir tarayıcı sunsa da yayıncılar, AI Mode'da yer almak isteyip modellerin eğitiminde kullanılmak istemediklerinde bunu ayrı olarak seçemiyor.
Cloudflare'ın yeni politikası, Google başta olmak üzere aynı tarayıcıyı hem arama hem de yapay zeka için kullanan şirketleri sistemlerini değiştirmeye zorlamayı hedefliyor.