Arama motorları bir web sitesi üzerine gördüğü tüm sayfaları hatta bazı durumlarda görmediği sayfaları bile indexlemektedirler. Web sitesi sahipleri olarak, her içeriğimizin arama motorlarına açık olmasını istemeyebiliriz. Bu gibi durumlarda sitenin imajını zedelememek için o içeriğin arama motoru sonuçlarından kaldırılması gerekir.
Hangi Durumlarda İçerik Temizlenebilir
- Önceden varolan ancak sonradan silinmiş içerik
Bu durum, sitemizde daha önce yayınladığımız içeriğin güncelleğini yitirmesi veya sattığımız ürünün satışının çekilmesi halinde yaşanabilecek olası bir durumdur.
- Sitemizde yer almayan sayfalara verilmiş harici linkler
Bu durum ise, aslında sitede yer almayan bir sayfanın olduğu kabul edilerek, başka siteler tarafından verilen linklerdir.
- Sitenin başka bir adrese taşınması sonucu, eski sitedeki indexlerin silinerek yeni siteye aktarılması gerekir.
Hangi durumlarda sitemizde olmayan bir içeriğe link verilebilir
- Daha önceden varolan bir içerik silindiyse, o içeriğe verilen link silinmemiş olabilir.
- Kodlama hataları veya yanlış anlama sebebiyle link verilebilir.
- Ref kodlarını ekleyerek reklam amacıyla bilinçli olarak link verilebilir.
- Gizli içerik
Gizli içerik durumu, bir sitedeki ürün veya bilgilerin sadece istenilen üye veya kişilere açık olması durumunda, arama motorları tarafından o içeriğe gelebilecek ziyaretleri engellemek için bu tür sayfaların indexleri temizlenmektedir.
İçerik Temizleme Seçenekleri
- Bir sitenin tamamen arama motorlarından temizlenmesi
- Bir sitenin tüm sonuçlarının başka bir siteye aktarılması
- Bu durum site başka adrese taşındığı zaman tercih edilmektedir.
- Bir siteye ait belirli içeriğinin temizlenmesi
- Sitemizde olmayan sayfaların arama motorlarına var mış gibi gösterilmesi, sitelerin daha fazla index sayısına sahip olması düşüncesini göz önünde bulundurarak spam şüphesi oluşturmaktadır. Bu sebeple varolmayan indexler, sitelerin SEO çalışmalarının önüne geçer hatta sitelerin arama motorları tarafından filtreye sokularak cezalandırılmasına sebep olabilir.
- Aynı zamanda arama motorlarında bulunan geçersiz indexler, sitenin imajına gölge düşürmektedir. Ziyaretçiler aradıkları bir bilgi veya ürün üzerinden sizin sitenizde olmayan bir sayfaya ulaştıklarında kandırıldıklarını düşünebilmektedirler.
- Bunların dışında, admin panel girişi veya siteye ait resmi belge ve bilgilerin arama motoru üzerinden gelebilecek her türlü kullanıcıya gizli olması gerekir.
- Google Search Console
- Robots.txt
- Meta Kodu
- Htaccess
Neden İstenmeyen İndexlerin Silinmesi Gerekir?
Hangi Yöntemler ile İndex Silinir
Google Search Console Yapılandırması
Google Search Console, arama motorlarının website sahiplerine arama ve tarama durumları hakkında bilgilendirme ve düzenleme imkanı tanımaktadır.
Bu yazıda, Dünyaca en çok kullanılan arama motoru olan Google üzerinden anlatım yapılacaktır.
Web sitemizi Google Search Console'a kayıt ettikten sonra, Site Yapılandırma Bölümünde, Tarayıcı Erişimi bölümüne geçip Robots.txt oluşturun sekmesi ile sitemizin tüm içeriğinin Google tarafından görülmesini veya 2. Seçenek ile Tüm sitenin Google arama sonuçlarından kaldırılmasını sağlayabilirsiniz.
Eğer tüm site içeriği yerine sitedeki tekil linklerin kaldırılmasını istiyorsanız, Tarayıcı Erişiminden URL’yi kaldır sekmesinden, kaldırmak istediğimiz URL'leri girip Google tarafından değerlendirilmesini istiyoruz.
Robots.txt Düzenlemesi
Google Search Console üzerinden Robots.txt yi düzenleyerek tüm site içeriği üzerinde müdahale yapabiliyoruz. Ancak Robots.txt dosyasını elle düzenleyerek kaldırılmasını istediğiniz sayfa, dizin, kategori ve tüm site içeriğini arama motorlarından silebilirsiniz.
Tüm Siteyi Silmek için
User-agent: *
Disallow: /
Sadece istenilen Sayfa, Dizin veya Kategori için
User-agent: *
Disallow: / https://www.seohocasi.com/yanlis-url
Disallow: / https://www.seohocasi.com/yanlis-kategori
Disallow: / https://www.seohocasi.com/?ref
Google Resim Aramaları için
Sadece İstenilen Resim
User-Agent: Googlebot-Image
Disallow: /images/seo.jpg
Sitedeki Tüm Resimler
User-Agent: Googlebot-Image
Disallow: /
Meta Kodu Ekleme
Tüm site içeriğinin veya sadece istenilen içeriklerin indexlerini silmek için meta robots kodu kullanılabilmektedir.
Aşağıda yer alan kodu sadece istenilen sayfalara yerleştirerek o sayfaların indexlerini veya tüm sayfalara yerleştirerek site içeriğinin tüm indexini, bir sonraki arama motoru botunun ziyaretiyle arama motoru sonuçlarından kaldırılmasını sağlayabilirsiniz.
<meta content="noindex, nofollow">
Tüm arama motorlarından ziyade bazı arama motorlarının indexlerini silmek isterseniz, aşağıdaki örnekteki gibi sadece o botun adı girilmelidir.
<meta content="noindex, nofollow ">
Bunların dışında arama motorlarının sitenizi belleklemesini engellemek veya bellekteki sayfaların silinmesini sağlamak için aşağıdaki kodu eklemeniz gerekir.
<meta content="noarchive">
Htaccess Düzenlemesi
Site adresinin değiştirilmesi sonucunda eski siteye ait indexlerin yeni siteye yönlendirilmesi ile, hem arama motoru üzerinden gelecek ziyaretleri yeni siteye kayıpsız yönlendirmek hem de bu yönlendirme ile eski indexlerin de yeni site indexi olarak değiştirilmesini sağlamak için htaccess düzenlemesi kullanılmaktadır.
Htaccess ile 301 yönlendirmesi yaparak siteyi komple başka bir adrese yönlendirebilir.
Açılmayan sayfalar için 404 sayfası oluşturarak 404 sayfalarının indexlenmesi diğer yöntemleri ile engellenebilir.
Eski bir ürün veya bilgi sayfasının yeni bir ürün sayfasına yönlendirilmesini sağlayabiliriz.
Redirect permanent http://www.eskisite.com/ http://www.yenisite.com/
Çok güzel anlatmışsin kaan hocam. Bir de şu var. Google uzun bir süre erişemedigi sayfa ya da URL'i bir zaman sonra dizinden siliyor.
Teşekkürler ilyas. evet onu da ilave ettiğin için teşekkür ederim. unutmuşum.
Şimdi ben bır forum kurdum ve sonra hata sonucu çöktü ve indexlenmişti ancak yeniden bu forumu kurdum ama eski indexler gözüküyor yenileri gözükmüyor. Yeni indexlerin gözükmesi acaba ne kadar zaman alır?
teşekkürler yazı için
Blog yazmaya ilk başladığımda domain ve hosting gibi konulara yabancı olduğumdan ücretsiz blog servislerinden faydalandım. İlk blogum siteadı.wordpress.com a geçen gün, yasak olduğunu bilmeden birkaç affiliate (ortaklık) linki ekledim. Yazıyı kaydet komutu verir vermez blogumu banladılar.
Şimdi kendi hosting ve domainimi oluşturup eski blogumu içe aktar yöntemiyle taşımak istiyorum ama yeni site muhtemelen Google sandboxa girecek. Ücretsiz blog hizmeti olduğundan 301 yönlendirme yapma şansım yok. Hatta webmaster tools'dan adres değişik bildirimi bile yapamıyorum.
Son çare olarak yukarıda anlattığınız gibi, eski sitenin indexini webmastertools'dan tamamen sildikten sonra yeni domaine taşıma yapmayı düşünüyorum. Bundan başka yada farklı olarak bana ne tavsiye edebilirsiniz. Teşekkürler, Fatih.
Robots.txt baya hızlı ve etkili bir yöntem. Gerçi ben pek indexlenmiş sayfalarımı silmem. Sonuçta 1 hitte olsa fayda sağlar.
yahu ben amator biriyim bu dediklerinizdn de bir şey anlamadım alt yazı yüklemek icin ugraşırken taktuk net diye bir arama motoru musallat oldu kırdıracak bana pc yi kafayı yiyorum daha sade bir dille yardım cı olur sanız sevinirim
ramazan nickli arkadaş sizin buraya yazdığınız yorumun konuyla uzaktan yakından alakasının olmadığının farkındasınızdır.İndirdiğiniz bir dosyayı çalıştırmışsınız ve muhtemelen anasayfanız taktuk net isimli bir site olmuş bunu düzeltmek için Google'da anasayfa.reg diye aratınız.
ramazan kardeşim, bunu buraya yazdığın için Google taktuk aramalarında site sonucunu 4. sıraya çıkarmışsın, arama yapıca virüs ramazan taktuk die çıkıyor
benim sitemdeki resimlerin indexi Google'dan silinmiş bir anda oldu bu nedeni ne olabilir cevaplarsanız sevinirim
Arkdaşlar indexlerimi Google'dan sildim robot.txt ile sonra yeniden indexlenmesi için tekrar robot.txt ye izin verdim fakat tekrar eski indexler görünmeye başladı
abi bu kodu ekleyince kac gun içerisinde indexlerim silinir User-agent: *
Disallow: /
Hocam eline sağlık güzel yazı olmuşta benim istediğim tek bir bilgi vardı onu da yazdığınızı zannedip aynı satırı tekrar yazmışsınız. Yazıdan alıntı
arama motoru sonuçlarından kaldırılmasını sağlayabilirsiniz.
Tüm arama motorlarından ziyade bazı arama motorlarının indexlerini silmek isterseniz, aşağıdaki örnekteki gibi sadece o botun adı girilmelidir.
Buradan ne anlıyorsunuz siz. İstenen bot kısmı hatalı.
hocam Bir sorum olacak, Google'dan gelen uyarıdan dolayı yaklasık 100 adet yazı sildim şu an sitem eski yerlerine gelemiyor tahminim bu sebepten bunun icin bana bir öneriniz var mı? ne yapmalıyım..
Kaan abi Yha Şimdi ben Sitemin Googledeki indexlerini nasıl silcem bu yardimci olur musun yha WordPress ve subda ise forum kuruluydu ne yapmam lazım bi yardim etde siliyim indexleri abi :(:(
Arkadaşlar ben de ufak çaplı bir SEO yaptırdım bu yüzden Google'da 32k linkim çıkıyor bir aya yakın oldu. He bunun nerden baksan 20k'sı bozuk. Sıkıntı o değil sıkıntı şu link sayısı ne kadar fazla ise seni sanki o kadar geriletiyor. Böyle bir durum var mı?
selam kaan hocam eski sitemi yeni domaine taşıdım 301le yönlendirdim. 2 ay oldu. eski siteyi tamamen kaldırmak istiyorum. Google site taşıma işlemi için 6 ay gibi süre verdi ama.
Sizce 2 ay eski site linkleri yeni domaine oturması için yeterlimidir. eski siteyi ne zaman kaldırmamı önerirsiniz...
Şimdi ben web sitemde katagori değişikliği yaptım sitem blog sitesi idi video sitesne dönüüştüreceğim Robots.txt Düzenlemesini yaptım sitem ne zaman silinir yeni açtığım video sitene içerik eklersem silinirmi?
Hocam benim problemim biraz garip. Önceden film izleme sitesi olan sitemden tüm filmleri kaldırıp film rehberi ve arşivine çevirdim. Daha önceden film izleme sitesi olduğu için Google'in siteye kötü gözle baktığına eminim ama şu an öyle bi durum yok. Google bunun farkında değil ki şu an 3600 sayfam indexlenmesine rağmen Google arama sonuçlarında günde 50 gösterim civarında gidiyor. Ne yapmam gerek
Efendim şimdi haber sitem var ve 7500 haber ekli bunların hepsinin Google indexlerinden silinmesini istiyorum ve sitemdende kaldıracağım nedeni ise hepsi copy paste özgün haber gireceğim User-agent: *
Disallow: / bu komutu komple robot.txt sayfasına ekelyip ftp ye göndermem yetiyormu acaba indexlerin silinmesi için
Ben daha önce yayımlanan fotoğrafı siteden kaldırmıştım ama görsellerde yayınlanmaya devam ediyor ve bu surum oldukça beni rahatsız ediyor web yöneticisi araçları denedim ama reddedildi yazıyor
Url'ler kaldırıldıktan sonra yeni URLler ne zaman index alır acaba? Yada kaldırma isteği nasıl iptal edilir bilen var mı?
Merhaba yazı için teşekkürler yararlı oldu, sadece resimleri silsek index alanları problem yaratır mı
Ben Twitter profil resmime kendi fotoğrafımı koydum ve Twitter şifrem ile mail şifremi unuttum. Şifre alamıyorum telefon numaramda kayıtlı değildi. Profil resmim Google görsellere çıkmış adımı yazınca resmim çıkıyor. Sanırım indexlenmiş ben o resmimi Google görsellerden nasıl kaldıracağım. Bu verdiğiniz bilgileri denedim fakat olmadı. Ban yardımcı olabilir misiniz?
merhabalar kolay gelsin
Öncelik le çalışmalarınız için teşekkür ederim bir çok faydalı konularınız var
benir bir sorum olacak sitemdeki bir link Google sıralamasına nedense giremiyor. yaklaşık 3 ay gibi bir süre oldu daha dün eklediğim sayfalar ilk sıraya girer iken 3 ay önceki eklenemiyor.
bunun da Google gibi getir den olduğunu düşünüyorum şundan dolayı
misal asıl link
site adı.com/sayfa-adi orjinali bu
fakat ben orda bi hata yaptım tekrar Google gibi getirde aynı sayfa
site adı.com//sayfa-adi aradaki işaretten dolayı yönlendirildi yazıyor
ben bunu komple silerek aynı sayfayı tekrar indexlemek istiyorum bunun için nasıl bir yol önerirsiniz?
meta kodu ekleme kısmı hakkında bir sorum olacaktı; bütün sayfaları indexten düşürmek için kodunu değil de şeklinde eklememizin ne farkı olacaktır? Bir sakıncası olabilir mi?
Benim bir sorum olacaktı. Dreamofholiday sitesimizi yazılım firmamıza yenilettik. Günlük 5k ziyaretçimiz olan site 400 kişiye kadar geriledi. Extra makaleler yüklememize rağmen eski performansını bir türlü yakalayamyoruz. Bu konuda bize bilgi verebilir misiniz.