Soru-Cevap Xenforo robots.txt ayarları

[PATRON]

Selam arkdaşlar, web sitemde kullanmış olduğum robots.txt ayarları aşağıdaki gibidir.

Dear Guests, welcome! Please, Giriş Yap or Kayıt Ol to view hide content!

Fakat google search da bu kodların hata verdiğini gördüm. Sizin ayarlarınız nedir? Benim ayarlarımda bir yanlışlık mı var acaba?

Dear Guests, welcome! Please, Giriş Yap or Kayıt Ol to view hide content!

 

[XenTR]

Burada daha önce benzer bir konu yer alıyor

XenForo için Önerilen Robots.txt Dosyası

XenForo Robots.txt dosyaları hakkında birçok makale yada farklı kayıtlar bulabilirsiniz. Her kullanıcı kendine özgü robots.txt dosyası, oluşturabilir. Peki nedir bu dosya ne işe yarar? Robots.txt sitenin ana dizininde bulunan ismi değişmeyen, Google Botları için kılavuz bir dosyadır. Yani...

xentr.net

Ayrıca burada robot.txt ile ilgili bilgileri bulabilirsiniz.

robots.txt report - Search Console Help

See whether Google can process your robots.txt filesThe robots.txt report shows which robots.txt files Google found for the top 20 hosts on your site, the last time they were crawled, and any warnings

support.google.com

 

[XenTR]

Bizim kullandığımız yapı aşağıdaki gibidir.
https://xentr.net/robots.txt

XenForo resmi sitesinin yapısı ise
https://xenforo.com/robots.txt

Google size daha önce bir mail falan gönderdi mi? CSS ve JS dosyalarınıza erişim sağlayamıyoruz vs diye.

Yukarıda resimdeki hatalar .css ve .js dosyalarından kaynaklı görünüyor.. XenForo yapısı gereği css dosyaları genel anlamda template yapılarında olduğu için sistemle bir bütündür. Bu yüzden bunlara izin vermiş olmanız çokta XenForo için önemli değil. Standart robot.txt yapısı kullanmanız sizin için daha sağlıklı olacaktır.

 

[PATRON]

Sizdekine göre düzenledim ben. Teşekkür ederim.

 

[MehmetOZCAN]

Dear Guests, welcome! Please, Giriş Yap or Kayıt Ol to view hide content!

aynısı benımde basıma geldı bende bu kodları robots.txt dosyama ekledım. fakat birkac gun sonra sitemap dosyamı google panelden kontrol ettıgımde getirilemedi hatası aldıgımı farkettım kodları cıkardım ertesı gun sorun düzeldi. bu duzenlemeden sonra sitemap dosyanı takıp etmenı onerırım.

 

[hasannakyuz]

Merhabalar ;
Robots.txt ile ilgili aklıma acaba? diye takılan bir sorum olcaktı. Rota filtreleri kullanarak değiştirdiğimiz örneğin; account \ hesap bunu robota.txt’ ye eklerken Disallow: /account/ mu yoksa Disallow: /hesap olarak mı eklemek gerek. Belki saçma bir soru ama aklıma takıldı.