SEO Fiyat Hesaplama SEO ROI

SEO Sorunuzu Sorun Uzmanlarımız Yanıtlasın

Soru Sorun

SEO Açısından En Faydalı Robots.txt

Ismet Karaca
Ismet Karaca
Robots.txt 2 sene önce 47 Görüntülenme

Merhaba

SEO Açısından En Faydalı Robots.txt nedir ?

Lütfen gerekli kodları verebilirmisiniz.Teşekkürler.

SEO Hocası Soru Cevap her hafta e-postanızda. Ücretsiz abone olmak için tıklayın.

SEO Açısından En Faydalı Robots.txt için Yanıtlar

Sen De Yardımcı Ol!
  • Roman Adamita
    Roman Adamita 4 Ağustos 2015, 11:38

    Merhabalar İsmet Bey;

    En faydalı robots.txt dosyası yoktur. Doğru veya yanlış kurgulanan dosyalar vardır. Sitenize en uygun robots.txt dosyasını ancak siz oluşturabilirsiniz. Hangi sayfaların arama motorları tarafından indexlenmesini istemiyorsanız onları belirtiyorsunuz. Örneğin eğer Google, Yandex, Bing arama motorlarında farklı farklı indexlenmesini istiyorsanız aşağıdaki gibi robots.txt dosyanıza uygulayabilirsiniz;

    User-agent: Googlebot
    Disallow: /wp-admin/
    Disallow: /indexlenmesini-istemediginiz-sayfa/

    User-agent: YandexBot
    Disallow: /wp-admin/
    Disallow: /indexlenmesini-istemediginiz-sayfa/

    Ayrıca bunlar dışında Google’ın kendi örümceklerini ekleyebilirsiniz. Örneğin görseller için özel robots.txt kodu;

    User-agent: Googlebot-Image
    Allow: /wp-content/uploads/

    Mobil için özel Google robotu;

    User-agent: Googlebot-Mobile
    Allow: /

    Bunlar ekleyebilirsiniz. Ancak robots.txt dosyanızın sade olması sizin için daha yararlı olacaktır. Tabi temanızda indexlenmesini istemediğiniz sayfa yoksa onları belirtebilirsiniz. En sade ve sorun çıkarmayacak robots dosyasını http://www.SEOhocasi.com/robots.txt inceleyerek görebilirsiniz.

SEO Açısından En Faydalı Robots.txt Sorusunu Cevapla

X