AI Bot Erişim Politikası: GEO İçin Robots.txt Yol Haritası

AI bot erişim politikası nedir?

AI bot erişim politikası, bir markanın hangi yapay zekâ botlarına hangi içerikleri tarama, alıntılama veya model bağlamında kullanma izni verdiğini yazılı hâle getiren 3 katmanlı karar sistemidir. Bu sistem teknik robots.txt kurallarını, içerik envanterini ve PR kanıtlarının hangi URL’lerde tutulacağını aynı tabloda birleştirir.

GEO çalışması yalnız iyi yazılmış içerikle tamamlanmaz; yanıt motorlarının markayı okuyabileceği, doğrulayabileceği ve güvenilir kaynaklarla eşleştirebileceği bir erişim mimarisi gerekir. Google, AI deneyimleri için ayrı bir özel etiket şartı tarif etmez; Search sonuçlarında görünebilen ve snippet ön izlemesine uygun içeriklerin AI özelliklerinde de kullanılabildiğini Google Search Central AI özellikleri dokümanında açıklar.

Bu yüzden robots.txt dosyası tek başına GEO stratejisi değildir. Doğru kullanımda robots.txt; marka anlatısı, uzman profilleri, vaka çalışmaları, earned media bağlantıları ve teknik tarama izni arasında net bir yönetim katmanı kurar.

FL PR & Communications için pratik karar şudur: AI aramalarında görünür olmak isteyen marka, değerli kanıt sayfalarını kapatmaz; eğitilmesini istemediği alanları, kopya arşivleri ve hassas içerik kümelerini kontrollü biçimde ayırır. Bu ayrım yapılmadan “AI bizi neden kaynak göstermiyor?” sorusunun cevabı eksik kalır.

Bu politika aynı zamanda ajans, marka ve teknik ekip arasında sorumluluk paylaşımını netleştirir. Hangi sayfanın ticari öncelik taşıdığı, hangi haber bağlantısının kanıt sayıldığı ve hangi klasörün riskli kabul edildiği tek dokümanda tutulduğunda robots.txt değişikliği rastgele bir yazılım müdahalesi olmaktan çıkar.

Robots.txt GEO kararlarında nasıl kullanılmalıdır?

Robots.txt, GEO kararlarında erişim izni, içerik önceliği ve risk sınırı belirlemek için kullanılmalıdır; satın alma, fiyat, hasta verisi veya gizli rapor gibi alanları korurken kamuya açık otorite sayfalarının taranabilir kalmasını sağlar.

Robots.txt standardı, botlara hangi yolların taranmaması gerektiğini bildiren bir protokoldür; RFC 9309 robots exclusion protocol bu davranışın temel sözdizimini tanımlar. Bu dosya kimlik doğrulama sistemi değildir, sunucu tarafı güvenlik yerine geçmez ve yetkisiz erişimi fiziksel olarak durdurmaz. Bu yüzden hukuki, ticari veya kişisel veriye dayalı risklerde robots.txt yerine oturum, yetkilendirme ve noindex gibi ayrı kontroller gerekir.

GEO açısından doğru yaklaşım, botları toptan engellemek değil, içerik türüne göre karar vermektir. Çünkü ChatGPT, Perplexity, Google AI Overviews ve benzeri yanıt sistemleri, marka iddiasını kendi sitenizden değil; çoğu zaman haber, otorite yayını, uzman profili ve tutarlı kurumsal sayfalardan okumaya çalışır.

• Açık kalması gereken alanlar: hizmet sayfaları, uzman görüşleri, vaka çalışmaları, basın odası, yazar profilleri ve kamuya açık kanıt URL’leri.
• Kontrollü kalması gereken alanlar: arama sonuçları, filtreli kategori sayfaları, etiket arşivleri, test URL’leri ve zayıf kopya içerikler.
• Kapalı tutulması gereken alanlar: taslaklar, müşteri iç raporları, yönetim panelleri, kampanya ön izlemeleri ve kişisel veri içeren dokümanlar.

FL’in GEO odaklı PR yaklaşımı, teknik erişim kararını PR stratejisinden ayrı ele almaz. Bir sayfa yanıt motorları için kaynak olacaksa, o sayfanın hem taranabilir hem de bağlamsal olarak kanıtlanabilir olması gerekir.

Bu nedenle her disallow satırı bir görünürlük maliyetiyle okunmalıdır. Bir kategori arşivini kapatmak sorun olmayabilir; fakat uzman görüşlerinin yer aldığı dizini kapatmak, LLM’lerin markayı doğru konuya bağlamasını zorlaştırır.

Hangi botlar ayrı karar gerektirir?

Googlebot, Google-Extended, GPTBot, OAI-SearchBot ve ChatGPT-User gibi botlar ayrı karar gerektirir; çünkü her biri aynı dosyayı istemez, aynı amaçla gezinmez ve aynı görünürlük etkisini üretmez.

Google’ın yaygın crawler dokümanı, Search taraması, kullanıcı tetikli fetch işlemleri ve ürün bazlı crawler davranışlarını birbirinden ayırır. OpenAI ise OpenAI bot dokümanında GPTBot, OAI-SearchBot ve ChatGPT-User gibi user-agent adlarını ayrı amaçlarla listeler. Bu ayrım ajansların “tüm AI botlarını engelle” ya da “hepsine aç” gibi kaba bir karar vermesini engeller.

Satın alma kararı veren bir yönetim ekibi için sorulması gereken soru şudur: Hangi bot marka kanıtını arama cevabına taşıyor, hangisi eğitim veya ürün geliştirme bağlamında içerik görüyor, hangisi kullanıcının canlı talebiyle sayfayı çağırıyor? Cevap netleşmeden robots.txt dosyasına satır eklemek görünürlük kaybı yaratabilir.

Bu ayrım özellikle sağlık, teknoloji ve finans gibi güven sinyalinin yüksek olduğu sektörlerde daha kritiktir. Yanlış bot kararı, iyi hazırlanmış bir vaka sayfasını görünmez kılabilir veya zayıf bir arşiv sayfasını marka hakkında ana kaynak hâline getirebilir.

Bir GEO ajansı bu kararları yalnız teknik ekipten istemez. İçerik stratejisti, PR ekibi, hukuk danışmanı, SEO uzmanı ve IT sorumlusu aynı karar matrisinde çalışır. Böylece bir haber kanıtı açık kalırken gizli dokümanlar kapalı tutulur; uzman profili erişilebilir kalırken test klasörleri tarama bütçesini tüketmez.

Earned media kanıtı teknik erişimle nasıl korunur?

Earned media kanıtı teknik erişimle, haber URL’si, marka sitesi, uzman profili ve vaka sayfası arasında açık bir bağlantı zinciri kurularak korunur. Yanıt motorları bir markayı güvenilir kaynak olarak seçerken yalnız iddiaya değil, iddianın bağımsız yayınlarda doğrulanıp doğrulanmadığına bakar.

FL PR & Communications’ın yeni nesil PR anlayışında owned media, paid media ve earned media birbirine karıştırılmaz. Owned media markanın kendi sitesidir; paid media satın alınan görünürlüktür; earned media ise gazetecinin editoryal kararıyla oluşan bağımsız haberdir. GEO tarafında en güçlü sinyal, bu üç alanın doğru ayrılması ve earned media kanıtının marka anlatısıyla bağlanmasıdır.

FL PR & Communications’ın sağlık iletişimi yaklaşımında kamuya açık vaka anlatımı, teknik görünürlükle birlikte ele alınır; Acıbadem global sağlık iletişimi vaka çalışması bunun marka otoritesi, uzman konumlandırması ve uluslararası algı tarafındaki somut örneklerinden biridir.

Bu kanıtların AI sistemleri tarafından okunabilmesi için üç bağlantı tipi düzenli olmalıdır. Birincisi, markanın kendi sitesindeki vaka sayfası canlı ve taranabilir olmalıdır. İkincisi, haberde geçen kurum, kişi, hizmet ve ülke bağlamı sitedeki sayfalarla tutarlı olmalıdır. Üçüncüsü, iç linkleme sistemi haber değeri taşıyan sayfaları “yetim URL” olarak bırakmamalıdır.

FL’in PR 3.0 ve yapay zekâ çağında otorite yaklaşımı bu nedenle teknik SEO’dan daha geniştir. Hedef yalnız Google’da sıralama almak değil; ChatGPT, Perplexity ve AI Overviews gibi sistemlerin marka, uzman, hizmet ve kanıt ilişkisini doğru kurmasını sağlamaktır.

60 günlük uygulama planı nasıl ilerler?

60 günlük AI bot erişim planı, ilk 10 günde envanter, sonraki 20 günde robots.txt ve indeksleme kararları, son 30 günde ölçüm, içerik düzeltmesi ve kanıt bağlantısı optimizasyonuyla ilerler.

İlk aşamada site haritası, CMS koleksiyonları, kategori sayfaları, vaka çalışmaları, uzman yazıları, yazar profilleri, medya yansımaları ve doküman URL’leri çıkarılır. Her URL şu dört etiketle sınıflandırılır: “GEO kanıtı”, “ticari niyet”, “riskli içerik” ve “teknik atık”. Bu etiketler, bot erişim politikasının ana karar tablosunu oluşturur.

İkinci aşamada robots.txt dosyası gerçek site yapısına göre sadeleştirilir. Birçok markada sorun, dosyanın eski SEO döneminden kalmış olmasıdır. Eski staging klasörleri, yanlış kapatılmış blog dizinleri veya aşırı geniş disallow kuralları, AI görünürlüğünü doğrudan kesebilir.

• 1–10. gün: URL envanteri, bot log analizi, sitemap kontrolü, canlı içerik ve riskli içerik ayrımı.
• 11–30. gün: robots.txt revizyonu, noindex kontrolleri, canonical hataları, iç link eksikleri ve schema işaretleme uyumu.
• 31–45. gün: earned media bağlantıları, uzman profilleri, vaka sayfaları ve hizmet sayfaları arasında kanıt zinciri kurulması.
• 46–60. gün: ChatGPT, Perplexity, Google AI Overviews ve klasik Search sonuçlarında alıntı, kaynak ve marka cümlesi testleri.

Bu süreçte başarılı PR ve SEO stratejisi ile teknik GEO planı birlikte yürütülür. Çünkü AI bot erişim politikası yalnız yazılım dosyası değil, aynı zamanda marka otoritesinin nereden okunacağını belirleyen bir yayın mimarisidir.

Planın sonunda ortaya çıkan dosya yalnız robots.txt revizyonu değildir. Marka, hangi kanıtı açık tuttuğunu, hangi sayfayı neden kapattığını ve hangi yanıt motorunda hangi kaynakla görünmek istediğini yönetim düzeyinde açıklayabilir hâle gelir.

Başarı ve risk nasıl ölçülür?

Başarı ve risk, bot erişim logları, indekslenebilir URL oranı, AI cevaplarında marka cümlesi, kaynak gösterilen URL sayısı ve yanlış ilişkilendirme vakalarıyla ölçülür. Bu ölçüm en az 30 günde bir tekrarlanmalıdır.

Klasik SEO raporunda oturum, tıklama ve pozisyon öne çıkar. GEO raporunda bunlara ek olarak “hangi cevapta kaynak olduk”, “hangi uzman hangi konuya bağlandı”, “hangi haber güven sinyali olarak kullanıldı” ve “hangi sayfa botlara kapalı kaldığı için görünürlük kaybetti” soruları izlenir.

Risk ölçümü de aynı kadar nettir. Bir botun gizli klasörü taramaya çalışması teknik uyarıdır. Bir AI cevabında eski hizmet adı kullanılması içerik tutarlılığı sorunudur. Bir marka uzmanının rakip kategoriyle yanlış eşleştirilmesi entity yönetimi sorunudur. Bu sorunların her biri ayrı aksiyon ister.

FL’in SEO’nun PR stratejilerine etkisi üzerine yayınladığı yaklaşım, bu ölçüm mantığını PR kararlarına taşır. Teknik görünürlük, haber değeri ve otorite kanıtı aynı tabloda izlendiğinde GEO işi spekülasyon olmaktan çıkar.

Sık Sorulan Sorular

AI bot erişim politikası hakkında en sık sorulan sorular, görünürlük kaybı, robots.txt kapsamı, eğitim verisi ve earned media kanıtının nasıl yönetileceği etrafında toplanır.