Robots.txt Oluşturucu

Arama motoru optimizasyonu

Robots.txt Oluşturucu


Varsayılan - Tüm Robotlar:  
    
Tarama-Gecikme:
    
Site haritası: (yoksa boş bırakın) 
     
Robotlarda Ara: Google
  Google Image
  Google Mobile
  MSN Search
  Yahoo
  Yahoo MM
  Yahoo Blogs
  Ask/Teoma
  GigaBlast
  DMOZ Checker
  Nutch
  Alexa/Wayback
  Baidu
  Naver
  MSN PicSearch
   
Kısıtlı Dizinler: Köke göre yol ve sonda bir eğik çizgi içermelidir "/"
 
 
 
 
 
 
   



Şimdi kök dizininizde 'robots.txt' dosyası oluşturun. Metni kopyalayın ve metin dosyasına yapıştırın.


Araç Hakkında - Robots.txt Oluşturucu

Bu araç sayesinde robots.txt dizini oluşturmak için saatlerce bilgisayar başında durmanız gerekmeyecektir. SEO işlemi yaparken, özellikle düzenleme yaptığımız sayfaların arama motoru botları tarafından görülmesini isteriz. Bunun içinde arama motoru botlarını çeşitli yöntemlerle sitemize çekerek, optimize yaptığımız sayfaların indexlenmesini bekleriz. Ancak bu işlemin her sayfa için yapılmasını istediğimiz söylenemez. Bazen bazı sayfaların arama motorlarınca erişilmesini istemezken, bazı sayfaların erişilip indexlenmesi site güvenliğimizi tehdit edebilmektedir. Tüm bu durumlara mahal vermemek için robots.txt oluşturucu (robots.txt generator)sayesinde ürettiğimiz kodları, sitemizin ana dizininde bulunan robots.txt dosyasına eklememiz yeterli olacaktır.