Cloudflare sinyalleri OpenAI’a yüz milyonlarca yeni sayfa buldurdu

Cloudflare ile OpenAI’ın ortak araştırma pilotu, OpenAI’ın arama botunun daha önce bulamadığı yüz milyonlarca web sayfasını keşfedip indekslemesine yardımcı oldu. Pilot, Cloudflare ağının yaklaşık %1’ini oluşturan gönüllü bir site grubuyla yürütüldü. Ancak bu sayfaların ChatGPT’de ne sıklıkla kaynak gösterildiği ya da ne kadar ziyaret getirdiği açıklanmadı.

Cloudflare ve OpenAI pilot projesi neyi ortaya koydu?

Pilot, Cloudflare’in ağ sinyallerinin klasik link tabanlı keşfin kaçırdığı faydalı sayfaları görünür kılabildiğini gösterdi. Bu sonuçlar, Search Engine Journal’ın aktardığına göre, Cloudflare blogunda 15 Ekim 2026’da yayımlanan ve iki OpenAI çalışanının da yazarları arasında olduğu yazıda paylaşıldı. Pilot ilk olarak 8 Temmuz’da duyurulmuştu.

• Keşif: sayfanın ne zaman güncellendiği, gerçekte neyin değiştiği ve sitenin trafik kalitesi gibi sinyaller katılımcı sitelerden geliyor. Örnek olarak bir çamaşır makinesi kullanım kılavuzu, pasaport ücretleri ve bir restoranın menüsü ile çalışma saatleri verilmiş; yani az backlink alan sayfalar.
• Crawl verimliliği: değişiklik sinyalleri botun bir sayfaya tekrar gitmeye değip değmediğini söylüyor; olmayan dosyalara, her şeyi ana sayfaya atan yönlendirmelere ve kopya URL’lere giden boş istekleri azaltmak hedefleniyor. Crawl hacmi ya da sunucu yükü verisi paylaşılmadı.
• Güvenlik: meşru bir siteye yerleştirilmiş sahte giriş formu gibi zararlı sayfaları, tüm domaini cezalandırmadan sayfa bazında işaretleyen sinyaller de test ediliyor.

ChatGPT Search Cloudflare pilotu sitemin görünürlüğünü artırır mı?

Doğrudan artırmaz: pilot sayfanın OpenAI indeksine girmesini sağlayabilir ama OpenAI bu sayfaları kendi kriterleriyle değerlendirip sıralıyor, yani keşfedilmek atıf garantisi değil. Yine de yön önemli. Yıllardır backlink’i olmayan sayfaların bulunması en zor işti. Güncellik ve gerçek değişiklik tespiti gibi altyapı seviyesindeki sinyaller AI aramada bir keşif kanalına dönüşürse, pratik ve sık güncellenen sayfaları doğru tutmak, onlara link kazandırmaktan daha kritik hale gelebilir.

İki çekince var. Hangi sitelerin katıldığı ve yeni sayfaların bu sitelerde olup olmadığı açıklanmadı. Şirketler ayrıca yeni sayfaların keşfinin başta crawl’u artırabileceğini kabul ediyor; vaat edilen yük azalması hemen görülmeyebilir. Cloudflare bu özelliği 2026’nın geri kalanında daha geniş kullanıma açmayı planladığını söylemişti ama net tarih yok.

Ölçüm de zayıf halka. Search Engine Journal, bazı ChatGPT linklerinde yakın zamanda hem UTM etiketinin hem de referrer bilgisinin eksik olduğunu, düzeltmenin dağıtılmaya başladığının söylendiğini de aktardı. Yani ChatGPT trafiğini GA4’te tam ölçmek hâlâ kolay değil.

OpenAI botlarını sitende nasıl yönetirsin?

OpenAI erişimini robots.txt’te iki ayrı user agent ile yönetirsin: ChatGPT araması için OAI-SearchBot, eğitimde kullanılabilecek içerik için GPTBot. Şirketlerin vurgusu da net: bir sayfa hakkındaki sinyal, o sayfaya erişim izni anlamına gelmiyor.

• Ayrımına karar ver: OAI-SearchBot’a izin verip GPTBot’u engellersen ChatGPT arama sonuçlarında kalırken içeriğin eğitimde kullanılmamasını istediğini belirtirsin. OpenAI de bu yapılandırmayı crawler sayfasında örnek olarak veriyor.
• Bedelini bil: OAI-SearchBot’u engellersen ChatGPT arama sonuçlarına girmezsin, sitenin yalnızca navigasyon linki olarak görünmesi mümkün. İki bota da izin verirsen OpenAI tek bir crawl’u iki amaç için kullanabilir.
• Cloudflare kullanıyorsan AI Crawl Control’e bak: tüm planlarda mevcut; hangi AI servislerinin siteye geldiğini gösteriyor ve her bot için izin ver/engelle seçeneği sunuyor.
• Logları izle: OpenAI bot isteklerinde ani artışları ve yönlendirme ya da 404’lere giden boş istekleri takip et.
• Long-tail sayfaları güncel tut: kılavuz, fiyat, çalışma saati ve gereklilik sayfaları tam da değerli diye örneklenen türden.

Kaynaklar

• Search Engine Journal: ChatGPT Search Can Draw On More Pages After A Cloudflare Pilot