Hizmetler
Teknik Yapay Zeka Taraması ve Erişim
Cevap motorlarının sayfalarınızı bulabilmesi, okuyabilmesi ve gerekirse alıntılayabilmesi için gereken teknik zemini denetler ve düzeltiriz.
Bu hizmet nedir?
Her motor kendi botlarını çalıştırır ve bu botları robots.txt ile ayrı ayrı yönetmenize izin verir. Bir bot engellenmişse, içerik ne kadar iyi olursa olsun o motorun cevaplarında yer almanız zorlaşır.
Bu hizmet, siteniz için bot bazında bir erişim politikası belirler ve bunu uygulanabilir düzeltmelere çevirir: robots.txt, CDN ve WAF kuralları, sunucu taraflı HTML, sitemap, indeksleme ve doğrulama araçları.
Google’ın AI Bakışı (AI Overviews) ve AI Modu (AI Mode) için de yer almanın koşulu, sayfanın indekslenmiş ve snippet ile gösterilmeye uygun olmasıdır. Google ek bir teknik gereksinim ya da özel bir “yapay zeka dosyası” olmadığını söylüyor.
Kim yürütür
Denetimi AI Visibility Turkey ekibi yapar; sitedeki teknik değişiklikleri grubun uygulama kolu Optimum7 yürütür (e-ticaret geliştirme ve dijital pazarlama ajansımız).
Ne yapıyoruz
Bot bazında robots.txt politikası
OAI-SearchBot, GPTBot, ChatGPT-User, PerplexityBot, ClaudeBot, Claude-SearchBot, Googlebot, Bingbot ve Google-Extended için neyin açık, neyin kapalı olacağını yazılı bir politikaya bağlarız.
CDN ve WAF izinleri
Güvenlik katmanının arama botlarını yanlışlıkla engellemediğini kontrol ederiz. OpenAI izin verilen IP aralıklarını yayınlar; Anthropic ise IP’ye göre engellemeyi önermez.
Sunucu taraflı HTML
Önemli içeriğin ilk HTML yanıtında bulunduğunu doğrularız. Anahtar bilgilerin yalnızca sekmelerde, akordeonlarda, PDF ya da görsellerde durmaması gerekir.
Sitemap ve indeksleme
Sitemap’i, kanonik adresleri ve Google ile Bing’deki indeks durumunu kontrol ederiz.
Doğrulama araçları
Search Console ve Bing Webmaster Tools doğrulamasını kurar ya da kontrol ederiz; yapay zeka performansını izleyebilmeniz için.
llms.txt değerlendirmesi
İsteğe bağlı, düşük maliyetli bir hijyen adımı olarak ele alırız. Bir sıralama kaldıracı olarak sunmayız.
Teslimatlar
Bot erişim matrisi
Her bot için mevcut durum, önerilen politika ve gerekçesi.
Önceliklendirilmiş düzeltme listesi
robots.txt, CDN/WAF ve HTML sorunları etki ve çaba sırasına göre.
Önerilen robots.txt metni
Politikanıza göre hazırlanmış, uygulamaya hazır sürüm.
Doğrulama özeti
Düzeltmelerden sonra indeks ve erişim kontrollerinin sonucu.
Seçenekler ve dengeler
Görünmek mi, eğitime katkı mı?
Arama botlarına (OAI-SearchBot, PerplexityBot, Claude-SearchBot) izin vermek, sitenizin o motorların cevaplarında yer alabilmesi içindir. Eğitim botları (GPTBot, ClaudeBot) ayrı bir ayardır. Birine izin verip diğerini kapatmak mümkündür ve bu bir iş kararıdır; teknik bir zorunluluk değildir.
Tümüne izin ya da seçici izin
Tümüne açmak en geniş erişimi verir; seçici politika ise içeriğinizin eğitimde kullanılmasını sınırlamanıza izin verir. Seçici politika kuralların güncel tutulmasını gerektirir.
IP listesi ya da kullanıcı aracısı kuralları
IP izin listeleri daha sıkı kontrol sağlar ama bakım ister. Anthropic IP’ye göre engellemeyi önermediği için bu botlarda kullanıcı aracısı kuralları daha uygundur.
Kullanıcı tetiklemeli botlar
ChatGPT-User ve Perplexity-User gibi kullanıcı isteğiyle çalışan botlar robots.txt’yi dikkate almayabilir. Bu nedenle bu botlar için robots.txt tek başına kesin bir denetim sağlamaz.
Karar notu: görünmek mi, eğitim mi?
Hangi motorlarda cevaplarda yer almak istediğinizi, hangilerinde içeriğinizin eğitimde kullanılmasına izin vereceğinizi biz değil siz belirlersiniz. Biz her seçeneğin teknik sonucunu açıkça yazarız.
Kanıt durumu
Motorun kendi belgesi
OpenAI belgelerine göre OAI-SearchBot siteleri ChatGPT aramasında gösterir; GPTBot eğitim için kullanılabilir ve ayrı bir ayardır; ChatGPT-User kullanıcı tetiklidir ve robots.txt uygulanmayabilir. Değişikliklerin yansıması yaklaşık 24 saat sürer.
Perplexity belgelerine göre PerplexityBot siteleri Perplexity aramasında gösterir ve temel model eğitimi için kullanılmaz; Perplexity-User kullanıcı isteğiyle çalışır ve genellikle robots.txt’yi dikkate almaz. Perplexity kaynakların nasıl sıralandığını yayınlamıyor.
Anthropic belgelerine göre ClaudeBot eğitim, Claude-User kullanıcı tetikli getirme, Claude-SearchBot ise arama indeksleme içindir. Son ikisini engellemek Claude arama cevaplarındaki görünürlüğü azaltabilir.
Google-Extended, Gemini eğitimi ve dayanak (grounding) kullanımını kontrol eden bir robots.txt belirtecidir; Search’e dahil olmayı etkilemez. Microsoft Advertising (8 Ekim 2025) anahtar cevapların sekmelerde ya da akordeonlarda gizlenmemesini, yalnızca PDF ya da görselde bilgi bulunmamasını önerir.
llms.txt, Jeremy Howard’ın 3 Eylül 2024’te yayınladığı gayriresmi bir öneridir; onaylanmış bir standart değildir. Haberlere göre Google’dan John Mueller hiçbir yapay zeka sisteminin onu kullanmadığını ve Google Search’ün ona ihtiyaç duymadığını söyledi. Bu yüzden isteğe bağlı bir hijyen adımı olarak ele alırız.
Kaynak: OpenAI: bots ↗; Perplexity: bots ↗; Anthropic: crawling ↗; Google: common crawlers ↗; Microsoft Advertising: content for AI answers ↗; llmstxt.org ↗; Search Engine Roundtable: llms.txt ↗
Kimler için
Size uygun olabilir
- Güvenlik duvarı (CDN/WAF) arkasında çalışan siteler.
- İçeriği ağırlıklı olarak tarayıcıda (istemci tarafında) oluşturan siteler.
- Genel bir kuralla tüm botları engellemiş olabilecek siteler.
- Hangi botlara ne izni verdiğini bilmeyen kurumlar.
Dikkat edilecekler
- robots.txt’niz açıksa ve içeriğiniz sunucu taraflı geliyorsa kısa bir kontrol çoğu zaman yeterlidir; büyük bir proje gerekmeyebilir.
Süreç
Mevcut durumun okunması
robots.txt, yanıt başlıkları, CDN/WAF kayıtları ve indeks durumunu inceleriz.
Bot bazında politika
Görünmek ve eğitim konusundaki tercihlerinizi her bot için yazılı bir politikaya çeviririz.
Düzeltmelerin uygulanması
Onayınızla robots.txt, CDN/WAF ve HTML düzeltmelerini uygularız.
Doğrulama
İndeks, Search Console ve Bing Webmaster Tools üzerinden sonucu doğrularız. OpenAI tarafındaki değişikliklerin yansıması yaklaşık 24 saat sürebilir.
Fiyat
Teknik çalışma, Aylık Program paketinin içinde yürür ya da Gelişim Analizi'nin ardından ayrı kapsamlanır; Aylık Program'ın gösterge fiyat aralığı geçerlidir, bkz. Paketler ve Fiyatlar.
Ne vaat etmiyoruz
Botlara erişim açmak, cevaplarda yer almayı garanti etmez. Google yapay zeka özelliklerinde de indeksleme ve gösterim hiçbir zaman garanti değildir. Erişim gerekli bir koşuldur, yeterli bir koşul değildir.
Sık sorulanlar
Yapay zeka botlarına tamamen izin vermeli miyim?
Google-Extended’i engellersem Google aramasından düşer miyim?
llms.txt eklemeli miyim?
Markanız yapay zeka cevaplarında nerede duruyor?
Web sitenizi ve konularınızı iletin; e-posta ile size dönelim.