searchbeam
ENTR
AI Arama & GEO

Google 2027’de ortak robots.txt AI eğitim opt-out’unu destekleyecek

2 dk okuma
Searchbeam kapak: Google tek robots.txt kuralıyla AI eğitimini engelleyecek. Google desteği 2027 başı, Bing 1 Şubat 2027, IETF taslağı.
Bu sayfada
  1. Google’ın robots.txt AI eğitimi kontrolü neyi değiştiriyor?
  2. AIPREF robots.txt token’ı artık resmi standart mı?
  3. AI eğitimi opt-out’u için robots.txt nasıl hazırlanır?
  4. Kaynaklar

Google, 30 Ekim 2026’da IETF’te görüşülen bir öneriyi gönüllü olarak benimseyeceğini açıkladı: tek bir robots.txt kuralıyla birden fazla AI sağlayıcısına eğitim tercihini bildirebileceksin. Google desteği 2027 başında planlıyor. Bing de aynı gün kendi kontrollerini duyurdu. Haberi Search Engine Roundtable ve PPC Land aktardı.

Google’ın robots.txt AI eğitimi kontrolü neyi değiştiriyor?

Her AI botunu tek tek yazmak yerine tek bir tercih belirtebiliyorsun. Search Engine Roundtable’a göre sinyal, IETF’in AIPREF çalışma grubuna dayanan ve __usage_ai-training user-agent’ı olarak yazılan ortak bir policy token. Kaynaklara göre OpenAI ve Anthropic de sürece dahil.

John Mueller’a göre, bir site token ile eğitimi reddeder ve Google-Extended’ı açıkça belirtmezse, Google bunu Google-Extended disallow edilmiş gibi yorumlayacak. Mevcut kontroller çalışmaya devam ediyor; Search Console’daki opt-out da duruyor.

Bing tarafında PPC Land’e göre AI Training, AI Grounding ve Limited Grounding ayarları var. 15 Aralık 2026’dan itibaren NoArchive veya NoCache kullanan siteler için Bing Webmaster Tools’ta geçici grounding kontrolleri gelecek; Bing yeni tercihleri 1 Şubat 2027’den itibaren dikkate alacak; eski direktif kullanan siteler için son tarih 1 Mart 2027.

AIPREF robots.txt token’ı artık resmi standart mı?

Hayır, hâlâ taslak. Çalışma grubuna katılan yayıncı Nate Hake, X’te işin IETF seviyesinde bitmediğini ve önemli anlaşmazlıkların sürdüğünü söyledi. İfade, kapsam ve sözdizimi değişebilir; token adını geçici kabul et.

Kapsam da önemli. PPC Land’in vurguladığı gibi Google’ın token’ı yalnızca eğitimi kapsıyor; Bing ise eğitimi grounding’den (soruya yanıt verirken sayfaları çekme) ayırıyor. Eğitimi engellemek, AI yanıtlarında görünüp görünmeyeceğini belirlemiyor. Yani iki ayrı dokümantasyonu okumak gerekiyor.

AI eğitimi opt-out’u için robots.txt nasıl hazırlanır?

Google tarafında henüz canlı bir şey yok; şimdilik iş planlama. Aşağıdakiler bizim yorumumuz:

  • Mevcut kuralları denetle. Google-Extended, GPTBot, ClaudeBot, Applebot-Extended ve CCBot için neyi yazdığını listele.
  • Eğitim ve grounding’e ayrı karar ver. Eğitimi engelleyip yanıtlarda alıntılanmaya izin vermek yaygın bir tercih. Bing bunu artık açıkça destekliyor; PPC Land, AI yanıtlarını engellemenin AI deneyimlerindeki görünürlüğü azaltabileceğini not ediyor.
  • Google-Extended kurallarını koru. Mueller’a göre açık kurallar ortak token’ın varsayılan davranışının önüne geçiyor.
  • Bing tarihlerini takvime ekle. NoArchive veya NoCache kullanıyorsan yeni ayarları 1 Mart 2027’den önce yap.
  • robots.txt’i güvenlik sanma. Gary Illyes’e göre robots.txt bir öneri; Googlebot taklidi çok kolay. Googlebot’u user-agent ile değil IP ve reverse DNS ile doğrula.
  • IETF taslağını takip et; kesinleşmeden sabit bir yapı kurma.

Kaynaklar