Cloudflare arama görünürlüğünü korurken yapay zeka eğitimini engelleyen yeni ayarını duyurdu

Cloudflare, web sitesi sahiplerinin arama motoru dizinlerinde kalmasını sağlarken içeriklerinin yapay zeka modellerini eğitmek amacıyla taranmasını engellemesine imkan tanıyan yeni bir ayar sundu. Şirket, arama ve model eğitimi görevlerini tek bir botta birleştiren karma kullanımlı tarayıcıların yarattığı ikilemi çözmek için "Disallow AI Training" seçeneğini hayata geçirdiğini açıkladı. Bu özellikle birlikte Apple, Google ve Microsoft gibi şirketlerin tarayıcıları arama dizini için içeriğe erişmeye devam ederken eğitim süreçlerinin dışında tutulabiliyor.

Sistem, robots.txt yönergelerini ağ seviyesindeki denetimlerle senkronize ederek çalışıyor. Cloudflare ağındaki sitelerin yüzde 17'si eğitim botlarını engellemeyi tercih ederken, arama tarayıcılarını engelleyen sitelerin oranı yüzde 1'in altında kalıyor. Şirket, şeffaflık ve tercih kurallarına uyum taahhüdü veren operatörleri "Accountable" olarak sınıflandırdı. Apple, Google ve Microsoft bu kriterleri karşılayan veya taahhüt eden sağlayıcılar arasında yer aldı. Amazon, Anthropic, Meta ve OpenAI gibi kuruluşların yalnızca eğitim amaçlı tarayıcıları ise arama sonuçları etkilenmeden tamamen engellenebiliyor.

Altyapı sağlayıcısı, 15 Eylül itibarıyla Bot Yönetimi ve AI Tarama Kontrolü yapılandırmalarında değişikliğe gidiyor. Eski "Block AI Bots" seçeneği kademeli olarak kaldırılarak Arama, Eğitim ve Ajan olmak üzere üç ayrı kategoriye geçiş sağlanıyor. Ayrıca şirket, gelecek yılın başından itibaren web yöneticilerinin yapay zeka özetlerinde içeriklerinin ne kadarının yer alacağını tek bir panel üzerinden belirleyebileceği yeni araçları devreye almayı hedefliyor.