Cloudflare, AI tarayıcılarına kapıyı kapatıyor, yayıncıları kontrol altına alıyor

Cloudflare, platformunda yapay zeka tarayıcılarının varsayılan olarak ağını kullanan web sitelerindeki içeriğe erişmesini engelleyecek kapsamlı bir güncelleme yayınladı.

Salı günü açıklanan karar, yayıncılar arasında yapay zeka modellerinin içerikleri üzerinde izinsiz veya tazminat olmaksızın eğitildiğine dair artan endişelerin ortasında geldi.

Dünyadaki internet trafiğinin yaklaşık yüzde 16'sı Cloudflare'den geçerken, değişiklik büyük dil modellerini (LLM'ler) besleyen veri boru hatlarını önemli ölçüde azaltabilir.

Güncelleme, Cloudflare'a kaydolan her yeni web sitesinin artık AI tarayıcı erişimini kabul etmesi veya devre dışı bırakması isteneceği anlamına geliyor.

Web sitesi sahipleri açıkça izin vermedikçe, erişim varsayılan olarak reddedilir.

Hareket, Cloudflare tarafından Eylül 2023'te tanıtılan ve müşterilerin AI tarayıcılarını tek bir tıklamayla engellemesine olanak tanıyan bir araca dayanıyor.

Şimdi, şirket bu yeteneği sistem genelinde bir varsayılana yükseltiyor.

AI botları için ödeme duvarları ve izinler

Cloudflare'ın en son teklifi, web yayıncılarının veri erişimi için yapay zeka geliştiricilerinden ücret almasına olanak tanıyan yeni bir para kazanma modeli de sunuyor.

Bu "tarama başına ödeme" özelliği, akış hizmetlerinin müzik ve film lisanslama için telif ücreti ödemesine benzer şekilde, içerik kullanımı için finansal bir çerçeve oluşturmayı amaçlar.

Yapay zeka tarayıcıları, OpenAI ve Google gibi şirketlerin modellerine güç sağlamak için tarihsel olarak web içeriğini toplu olarak kazımış olsa da, bu uygulama genellikle orijinal materyali barındıran web sitelerini atladı.

Web sitesi sahiplerine içeriklerinin kazınıp kazınmayacağı ve nasıl kazınacağı üzerinde kontrol vererek ve potansiyel gelir akışları sunarak bu hareket, yayıncılar ve yapay zeka firmaları arasındaki değer alışverişini yeniden dengelemeye yardımcı olabilir.

Cloudflare'a göre, değişiklik tüm yeni alan adları için geçerlidir ve kademeli olarak mevcut müşterilere genişletilecektir.

Yayıncılar, AI tarayıcı erişimini kontrol panellerinden yönetme, parametreleri veya ödeme gereksinimlerini gerektiği gibi ayarlama olanağına sahip olacak.

Yapay zeka geliştiricileri ve web altyapısı arasında artan gerilim

OpenAI, Cloudflare'ın yaklaşımıyla ilgili endişelerini dile getirdi.

Microsoft destekli laboratuvara göre, yeni sistem Cloudflare'ı içerik sağlayıcılar ve veri tüketicileri arasındaki doğrudan müzakerelere müdahale eden bir "aracı" olarak etkin bir şekilde tanıtıyor.

OpenAI ayrıca, tarayıcılarının, web sitelerinin veri kazımayı devre dışı bırakmasına olanak tanıyan bir internet standardı olan robots.txt dosyalarına saygı duyduğunu yineledi.

Bununla birlikte, endüstri uzmanları, AI tarayıcılarının genellikle geleneksel botlardan daha istilacı olarak görüldüğüne dikkat çekti.

Yalnızca seçici olmakla kalmazlar, aynı zamanda web sunucularını ezebilirler, bu da bazen insan kullanıcılar için düşük performansa veya erişim sorunlarına yol açar.

Bazı modeller milyarlarca belge üzerinde eğitildi ve bu da rıza, adil kullanım ve yapay zeka gücünün birkaç büyük firmanın elinde toplanması hakkında soruları gündeme getirdi.

Birleşik Krallık'taki Cripps'in yasal ortağı Matthew Holman, CNBC'ye Cloudflare'in hareketinin özellikle arama ve model eğitimi için "yapay zeka sohbet robotlarının veri toplama yeteneğini engelleyebileceğini" söyledi.

Anında etki, Cloudflare'ın kapsamı altındaki web siteleriyle sınırlı olsa da, uzun vadeli etki, model ilerlemesinde bir yavaşlama veya yüksek performanslı sistemleri eğitmek için artan maliyetler olabilir.