robots.txt Oluşturucu

WordPress, e-ticaret ya da özel siteniz için hazır şablonlarla robots.txt oluşturun; yapay zekâ botlarını tek tıkla engelleyin, site haritanızı ekleyin.

Ücretsiz · Tarayıcınızda çalışır, yazdıklarınız sunucuya gönderilmez

Şablon

Taranmasın (Disallow) — her satıra bir yol* joker karakterdir, $ adresin sonunu belirtir. Örn. /*.pdf$İstisna (Allow)Site haritaları — her satıra bir tam adres

Yapay zekâ eğitim botlarını engelleGPTBot, ClaudeBot, Google-Extended, CCBot, Applebot-Extended, Meta-ExternalAgent, Bytespider — Google/Bing sıralamasını etkilemez.Yapay zekâ arama botlarını engelleOAI-SearchBot, Claude-SearchBot, PerplexityBot — ChatGPT, Claude ve Perplexity aramalarında görünmezsiniz.SEO araç botlarını engelleAhrefsBot, SemrushBot, MJ12bot, DotBot — sunucu yükünü azaltır, rakip analizini zorlaştırır.

robots.txt (sitenizin kök dizinine koyun)

# robots.txt — arsoftbilisim.net/araclar/robots-txt-olusturucu ile oluşturuldu

User-agent: *
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-admin/
Disallow: /?s=
Disallow: /search/
Disallow: /wp-login.php
Disallow: /*?replytocom=

Sitemap: https://ornek.com.tr/sitemap.xml

Hızlı test

Googlebot (mobil)
Bingbot
YandexBot
GPTBot
OAI-SearchBot
ClaudeBot
PerplexityBot
AhrefsBot

robots.txt Oluşturucu ne işe yarar?

İyi bir robots.txt kısa olur: yönetim paneli, arama sonuç sayfaları ve sepet gibi değeri olmayan bölümleri kapatır, site haritasını bildirir. Bu oluşturucu yaygın senaryolar için şablonlar sunar ve dosyanın sonucunu anında test etmenizi sağlar.

Sık sorulan sorular

Yapay zekâ botlarını engellemek SEO'yu etkiler mi?

GPTBot, ClaudeBot, Google-Extended ve CCBot gibi eğitim botlarını engellemek Google ya da Bing sıralamanızı etkilemez. OAI-SearchBot, Claude-SearchBot ve PerplexityBot gibi arama botlarını engellerseniz yapay zekâ arama sonuçlarında görünmezsiniz.