Ücretsiz SEO aracı

Robots.txt Oluşturucu

Hangi botların hangi klasörleri tarayabileceğini belirleyin; GPTBot, ClaudeBot, PerplexityBot gibi yapay zekâ botları için ayrı kurallar ekleyin ve site haritanızı bildirin.

Varsayılan kural (tüm botlar)
Yapay zekâ botları
robots.txt

    

Nasıl kullanılır?

  1. 01

    Varsayılan kuralı ve engellemek istediğiniz klasörleri seçin.

  2. 02

    Yapay zekâ botları için izin/engelle tercihini yapın.

  3. 03

    Dosyayı indirip sitenizin kök dizinine robots.txt adıyla yükleyin.

Sık sorulan sorular

01 Robots.txt sayfayı Google’dan kaldırır mı?

Hayır. Robots.txt taramayı engeller, dizinden kaldırmaz. Bir sayfayı arama sonuçlarından çıkarmak için noindex etiketi kullanılmalıdır.

WhatsApp