Arama & SEO

Google, Microsoft ve OpenAI ortak robots.txt tercihine hazırlanıyor

Google, Microsoft ve OpenAI yapay zekâ eğitimi için tek bir robots.txt satırını onurlandıracak. Siteler hangi tarihlerde ne yapmalı, neye dikkat etmeli?

Kısa cevap

Google, Microsoft ve OpenAI, yapay zekâ eğitimi tercihini robots.txt içindeki tek ve ortak bir satırla bildirmeyi destekleyeceklerini açıkladı. Böylece siteler her şirketin tarayıcısı için ayrı kural yazmak zorunda kalmayacak. Ancak şirketlerin hiçbiri bugün satırı desteklemiyor; tarihler farklı ve Microsoft yapay zekâ cevaplarında yer almayı ayrıca yönetiyor.

Öne çıkanlar

  • Ortak satır robots.txt'ye yeni bir direktif eklemiyor; mevcut kurallar bu tercih için sayılmıyor.
  • Google bu satırı, Google-Extended belirtilmemişse onu engellemiş gibi yorumlamayı planlıyor.
  • Microsoft, NoArchive ve NoCache etiketlerinin yerine eğitim ve cevaplarda yer alma için iki yeni tercih getiriyor.
Ekranda renkli program kodu satırları
Fotoğraf: Godfrey Atima / Pexels

2 dk okumaYazar: UNIT Journal EditörYayın yönetmeni: Uğur Deniz İlhanArama & SEO

Search Engine Journal'ın aktardığına göre Google, Microsoft ve OpenAI, yapay zekâ eğitimi tercihini tek bir ortak robots.txt satırıyla okumayı planlıyor. Satır, Anthropic'ten Kevin Kelley'nin IETF'in Yapay Zekâ Tercihleri çalışma grubuna sunduğu bireysel bir taslaktan geliyor; yani resmî bir standart değil.

Ortak satır nasıl çalışıyor?

Taslak, robots.txt'ye yeni bir direktif eklemiyor. Siteler, "__usage_ai-training" adlı bir ilke belirteci için olağan User-Agent, Allow ve Disallow kurallarını yazıyor. Örneğin tüm siteyi eğitimden çıkarıp yalnızca basın kiti klasörüne izin verilebiliyor.

Önemli ayrıntı: bugünkü robots.txt dosyaları bu tercih için "tercih yok" sayılıyor, "User-Agent: *" grubu belirtece hiçbir zaman uymuyor ve belirteç taramayı da denetlemiyor.

Şirketler bunu ne zaman destekleyecek?

Haberdeki zaman çizelgelerine göre üç şirket de satırı henüz desteklemiyor. Google'ın 2027'de desteklemeyi hedeflediği belirtiliyor; satırı kullanan ve Google-Extended belirtmeyen bir siteyi, Google-Extended'ı engellemiş gibi yorumlayacak. OpenAI ise önümüzdeki aylarda desteği hedefliyor.

Microsoft daha ayrıntılı bir yol seçti: eğitim için ortak satırı alıyor, cevaplarda yer almak için ise sayfa düzeyinde ayrı bir "AI Grounding" tercihi getiriyor. Yeni seçenekleri 1 Şubat 2027'den itibaren dikkate alacak ve NoArchive ile NoCache etiketlerini 1 Mart 2027'den sonra bu amaçla tanımayacak. Eski etiketleri kullanıp cevaplardan uzak durmak isteyen siteler için Bing Webmaster Tools'taki geçici tercih 15 Aralık'ta açılıyor.

Türkiye'deki siteler ne yapmalı?

Tercihinizi yazmadan önce hedefinizi netleştirin: eğitimden çıkmak ile yapay zekâ cevaplarında görünmek aynı karar değil. Microsoft da her iki kısıtlamanın yapay zekâ cevaplarındaki marka görünürlüğünü azaltabileceğini belirtiyor. Bu dengeyi, markanızı yapay zekâ cevaplarında görünür kılan GEO (üretken motor optimizasyonu) çalışmanızla birlikte ele alın.

  • Bugünkü robots.txt dosyanızı ve sayfalarınızdaki NoArchive ile NoCache etiketlerini listeleyin.
  • Hangi içerik türlerini (blog, fiyat, ürün sayfası) eğitime kapatmak istediğinizi iş birimleriyle yazılı karara bağlayın.
  • Eski etiketlerle Microsoft cevaplarından uzak durmak istiyorsanız Bing Webmaster Tools tercihini 15 Aralık'tan sonra kontrol edin.
  • Tercih satırı yayına girdiğinde bir sınama yapıp Search Console ve Bing Webmaster Tools'ta etkisini izleyin.

Sık sorulanlar

Ortak satır Google Arama sıralamasını etkiler mi?
Haberdeki Google belgelerine göre Google-Extended Google Arama'ya dahil olmayı etkilemiyor. Yapay zekâ özetleri için ise Search Console'daki ayrı bir kontrol var.

Kaynaklar

  1. Search Engine Journal ·

UNIT Journal'ı takip edin

Arama, yapay zekâ ve yeni teknolojilerdeki gelişmeler her gün akışınızda.

İlgili yazılar

← UNIT Journal'a dön

Görünürlüğünüzü
bugün ölçelim.

Mevcut arama görünürlüğünüzü ve üretken motorlardaki durumunuzu çıkarıyoruz. Ücretsiz, tek sayfa, gerçek veriyle.

Analiz İsteyin
Teklif Al