SEO Fiyat Hesaplama
SEO Hocası Soru Cevap

SEO Açısından En Faydalı Robots.txt

0
Ismet Karaca
Ismet Karaca
Robots.txt 3 sene önce 178 Görüntülenme

Merhaba

SEO Açısından En Faydalı Robots.txt nedir ?

Lütfen gerekli kodları verebilirmisiniz.Teşekkürler.

SEO Soru Cevap her hafta e-postanızda. Ücretsiz abone olmak için tıklayın.

SEO Açısından En Faydalı Robots.txt için Yanıtlar

  • Roman Adamita
    0
    Roman Adamita 4 Ağustos 2015, 11:38

    Merhabalar İsmet Bey;

    En faydalı robots.txt dosyası yoktur. Doğru veya yanlış kurgulanan dosyalar vardır. Sitenize en uygun robots.txt dosyasını ancak siz oluşturabilirsiniz. Hangi sayfaların arama motorları tarafından indexlenmesini istemiyorsanız onları belirtiyorsunuz. Örneğin eğer Google, Yandex, Bing arama motorlarında farklı farklı indexlenmesini istiyorsanız aşağıdaki gibi robots.txt dosyanıza uygulayabilirsiniz;

    User-agent: Googlebot
    Disallow: /wp-admin/
    Disallow: /indexlenmesini-istemediginiz-sayfa/

    User-agent: YandexBot
    Disallow: /wp-admin/
    Disallow: /indexlenmesini-istemediginiz-sayfa/

    Ayrıca bunlar dışında Google’ın kendi örümceklerini ekleyebilirsiniz. Örneğin görseller için özel robots.txt kodu;

    User-agent: Googlebot-Image
    Allow: /wp-content/uploads/

    Mobil için özel Google robotu;

    User-agent: Googlebot-Mobile
    Allow: /

    Bunlar ekleyebilirsiniz. Ancak robots.txt dosyanızın sade olması sizin için daha yararlı olacaktır. Tabi temanızda indexlenmesini istemediğiniz sayfa yoksa onları belirtebilirsiniz. En sade ve sorun çıkarmayacak robots dosyasını http://www.SEOhocasi.com/robots.txt inceleyerek görebilirsiniz.

SEO Açısından En Faydalı Robots.txt Sorusunu Cevapla