OpenAI, Google, Microsoft ve Anthropic yapay zeka taraması için ortak çıkış standardını benimsedi
Dört büyük yapay zeka şirketi, yayıncıların tek adımda yapay zeka eğitim tarayıcılarını engellemesine olanak tanıyan ortak bir robots.txt sinyalini destekleyecek ve parçalı çıkış sürecini basitleştirecek.
OpenAI, Google, Microsoft ve Anthropic, web sitesi yayıncılarının içeriklerinin birden fazla şirkette aynı anda yapay zeka eğitimi için taranmasını engellemesine olanak tanıyan yeni bir ortak standardı benimsemeyi kabul etti. Daha önce Search Engine Roundtable tarafından bildirilen bu hamle, şu anda her yapay zeka şirketinin tarayıcısı için ayrı tercihler belirlemek zorunda kalan yayıncılar arasında artan bir hayal kırıklığını ele alıyor. Meta da fikre koşullu destek sinyali verdi.
Yeni mekanizma, Anthropic'te standartlar konusunda teknik lider olan Kevin Kelley tarafından İnternet Mühendisliği Görev Gücü'nün (IETF) bir parçası olarak önerilen bir politika belirtecidir. Web sitelerinin robots.txt dosyasında, web tarayıcılarına sitenin hangi bölümlerine erişip erişemeyeceklerini söyleyen uzun süredir devam eden protokolde yer alır. Şimdiye kadar yayıncılar her yapay zeka şirketinin tarayıcısını ayrı ayrı listeliyordu; örneğin OpenAI'nin GPTBot'unu, Google'ın Google-Extended'ini ve Anthropic'in ClaudeBot'unu tek tek engelliyordu. Ortak belirteç, katılan tüm yapay zeka şirketlerinin onurlandıracağı tek bir tercih ifade etmelerine olanak tanır.
Birden fazla yapay zeka tarayıcısı için tek sinyal
Standart, içeriklerini yapay zeka eğitim veri kümelerinin dışında tutmak isteyen yayıncılar için çıkış sürecini basitleştirmek üzere tasarlanmıştır. Her şirket için ayrı kurallar tutmak yerine, bir web sitesi robots.txt dosyasına ortak belirteci ekleyebilir ve standardı destekleyen herhangi bir yapay zeka şirketi tarayıcısını buna göre kısıtlayacaktır. Belirteç arama dizinini etkilemez; siteler yapay zeka eğitim kullanımını engelleseler bile arama sonuçlarında görünmeye devam edebilir.
Microsoft, yayıncıların yapay zeka eğitiminden çıkma ile yapay zeka temellendirmesinden çıkma arasında ayrım yapmasına olanak tanıyan ayrıntılı kontroller sunacağını söylüyor; bu, bir yapay zeka modelini halüsinasyonları azaltmak için doğrulanmış bir kaynağa yönlendirme uygulamasıdır. Google, sitelerin içeriklerinin yapay zeka arama özelliklerinde görünüp görünmeyeceğini veya eğitim için kullanılıp kullanılmayacağını standart aramadaki görünürlüğü etkilemeden yönetmesine olanak tanıyan benzer kontrolleri zaten kullanıma sunmuştur. Anthropic yeni sinyali zaten uyguladı; Google ve Microsoft ise gelecek yıl desteklemeyi planlıyor. OpenAI, önümüzdeki aylarda uygulayacağını söylüyor.
Sektör desteği ve zaman çizelgesi
Duyuru, yayıncıların genellikle açık izin olmadan model eğitimi için içerik toplayan artan yapay zeka tarayıcılarıyla mücadele ettiği bir dönemde geliyor. Bazı kuruluşlar başka yaklaşımlar denedi: Gerçekten Basit Lisanslama (RSL) standardı, yayıncıların tarayıcılardan erişim için ücret almasına olanak tanır ve Cloudflare, yapay zeka tarayıcılarını varsayılan olarak engellemeye başladı. Yeni ortak belirteç, birden fazla sağlayıcıda çalışan daha hafif, standartlaştırılmış bir alternatif sunuyor.
Meta'nın iletişim başkanı Andy Stone, kavramı desteklediğini ancak Meta'nın belirteci onurlandırıp onurlandırmayacağını doğrulamadı. Stone, "Bu tür tercihleri aynı anda birden fazla sağlayıcıya ileten ortak bir sinyal oluşturmanın önemli bir adım olduğuna inanıyoruz" dedi. "Ve standartlar ve bunların sektör genelinde uygulanması konusunda diğer yapay zeka şirketleriyle çalışmayı dört gözle bekliyoruz."
Yayıncılar ve yapay zeka şirketleri için anlamı
Yayıncılar için ortak belirteç, idari yükü azaltır ve içerikleri üzerinde kontrol sağlamanın daha net ve tutarlı bir yolunu sunar. Yapay zeka şirketleri için ortak bir standardı benimsemek, içerik oluşturucularla gerginlikleri hafifletmeye ve izinsiz kazıma konusundaki yasal anlaşmazlıkları önlemeye yardımcı olabilir. Bu hamle aynı zamanda daha şeffaf ve rızaya dayalı veri uygulamalarına yönelik daha geniş bir endüstri baskısını da yansıtıyor.
Standart hala IETF içinde geliştirilme aşamasındadır ve etkinliği yaygın benimsenmeye bağlı olacaktır. Dört büyük yapay zeka şirketi taahhütte bulunurken, daha küçük yapay zeka girişimleri ve arama motorları dahil diğer oyuncular henüz destek açıklamadı. Yine de, önde gelen firmalar arasındaki koordinasyon, yapay zeka veri toplamaya daha birleşik bir yaklaşıma doğru önemli bir adımı işaret ediyor ve yayıncılara giderek yapay zeka odaklı bir web'de çalışmalarını korumak için pratik bir araç sağlıyor.
