Tek Satırla Yapay Zekâ Eğitimini Kapatmak: OpenAI, Google, Microsoft ve Anthropic'in Ortak robots.txt Kuralı

Bugüne kadar sitenizin içeriğinin yapay zekâ modellerini eğitmek için kullanılmasını istemiyorsanız, her şirketin botunu robots.txt dosyasında tek tek engellemeniz gerekiyordu: OpenAI için GPTBot, Anthropic için ClaudeBot, Google için Google-Extended, Apple için Applebot-Extended ve diğerleri. Yeni bir bot çıktığında listeyi güncellemek de size kalıyordu.

30 Ekim 2026'da OpenAI, Google, Microsoft ve Anthropic, bunun yerine tek bir ortak kuralı destekleyeceklerini açıkladı. Kural, robots.txt'yi yöneten İnternet Mühendisliği Görev Gücü'ne (IETF) taslak olarak sunuldu.

Kural nasıl yazılır?

Sitenizin kök dizinindeki robots.txt dosyasına şu iki satırı eklemeniz yeterli:

• User-agent: __usage_ai-training
• Disallow: /

Sitenin bir bölümünü eğitime açık bırakmak isterseniz (örneğin basın kiti ya da blog), altına izin satırı ekleyebilirsiniz:

• User-agent: __usage_ai-training
• Disallow: /
• Allow: /blog/

Kim, ne zaman uygulayacak?

• Anthropic (Claude): kuralı şimdiden uyguluyor.
• Microsoft: 1 Şubat 2027'de başlayacağı bildiriliyor.
• Google: 2027 başında başlayacağı bildiriliyor.
• OpenAI (ChatGPT): "önümüzdeki aylarda" diyor, kesin tarih vermedi.
• Meta: fikri desteklediğini söylüyor ama uygulama sözü vermedi.

Bu tarihler gelene kadar eski yöntemi bırakmayın: GPTBot, ClaudeBot ve Google-Extended engelleriniz varsa yerinde kalsın. OpenAI de yeni kuralın mevcut ayarların yerini almayacağını söylüyor.

En önemli nokta: aramayı kapatmaz

Kural yalnızca eğitim amaçlı veri toplamayı kapsıyor. ChatGPT, Claude ve Perplexity bir soruya cevap verirken kaynak sayfaları okumak için ayrı arama botları kullanır (OAI-SearchBot, ChatGPT-User, Claude-SearchBot, PerplexityBot). Bu botlar yeni kuraldan etkilenmez. Yani "içeriğim modellerin eğitiminde kullanılmasın ama müşteriler ChatGPT'ye sorduğunda sitem kaynak olarak çıksın" diyen bir işletme için bu kural tam aradığı şey.

Tersini yapmak, yani arama botlarını engellemek ise sitenizi yapay zekâ cevaplarından tamamen düşürür. Türkiye'nin 100 büyük sitesini taradığımızda beş haber sitesinin arama botlarını da engellediğini gördük; bu sitelerin içeriği ChatGPT ve Perplexity cevaplarında kaynak olarak gösterilemiyor.

Bilmeniz gereken sınırlar

• Bir tercih bildirir, teknik bir engel değildir: robots.txt'ye uymak gönüllülük esasına dayanır.
• Kural henüz resmi bir standart değil, IETF'te taslak aşamasında.
• Daha önce toplanmış verileri geri almaz; yalnızca bundan sonrası için geçerlidir.
• Yalnızca üretken yapay zekâ eğitimini kapsar; arama dizini ve anlık okuma ayrı kurallara tabidir.

Sizin için hangisi doğru?

• Yerel işletme, klinik, salon, otel: büyük ihtimalle eğitime de açık kalmak işinize gelir; yapay zekâ sizi ne kadar iyi tanırsa o kadar doğru önerir.
• Haber sitesi, yayıncı, özgün içerik üreten: eğitimi kapatıp aramayı açık bırakmak mantıklı bir orta yol.
• Her durumda: arama botlarını (OAI-SearchBot, ChatGPT-User, Claude-SearchBot, PerplexityBot) engellemeyin.

Sitenizin robots.txt dosyasının hangi botlara ne izin verdiğini ve yeni ortak kuralı kullanıp kullanmadığını ücretsiz site taramamızla görebilirsiniz. Kaynaklar: SiliconANGLE, Engadget.