Birçok web sitesi sahibi, kaynakların dizine eklenmesini ve arama motorlarından kaldırılmasını yasaklama sorunuyla karşı karşıyadır. Bunun nedeni genellikle sitenin güncelliğini yitirmesi ve alakasız hale gelmesi, yayıncının veya ziyaretçilerin siteye olan ilgisini kaybetmesi veya sitenin kişisel ve hatta gizli bilgiler içermesidir.
Talimatlar
Aşama 1
Bir siteyi arama motorlarından kaldırmanın birçok yolu vardır.
Arama motorundan sorgu sonuçlarını silmenin ilk ve en kolay yolu, sayfayı siteden silmek veya FTP bağlantısı üzerinden CMS sitesini tamamen silmektir. Birkaç gün içinde arama motoru veritabanını güncelleyecek ve kaynağınızın bağlantısını arama sonuçlarından kaldıracaktır.
Adım 2
Bir siteyi, tek tek bölümlerini veya sayfalarını dizine eklemekten korumanın ve böylece arama sonuçlarından bağlantıları kaldırmanın web yöneticileri arasında en popüler yolu robots.txt dosyasını düzenlemektir.
Kodu kullanarak indekslemeden ayrı bir sayfayı kapatabilirsiniz:
Kullanıcı Aracısı: *
Disallow: /page.html (page.html sayfasını kapatır)
İnternette bir robots.txt dosyası için kodların nasıl kullanılacağına dair birçok yazar talimatı vardır.
Aşama 3
Site sayfalarını arama motorlarından kaldırmanın üçüncü yolu, sayfalarında robots meta etiketini kullanmaktır. Etiket, etiketlerin arasına gizlenmiş sayfaların HTML koduna yazılır.
Böylece, PS sitesini yeniden indeksledikten sonra, bu meta etiketine sahip sayfalar aramadan çıkar. Bu yöntemin dezavantajı, birçok modern sitenin tpl şablonları kullanmasıdır; bu, kodu yüzlerce, belki de binlerce sayfada manuel olarak değiştirmeniz gerekeceği anlamına gelir.
4. Adım
Siteleri arama motorlarından kaldırmanın dördüncü yolu, X-Robots-Tag başlıklarını kullanmaktır. Bu başlığın özü, önceki meta etiketin kullanımına benzer, ancak girişin http başlıklarında bulunması gerekir:
X-Robots-Tag: noindex, nofollow
Adım 5
Bir web sitesini (tamamen) arama motorlarından kaldırmanın en etkili yolu, onu web yöneticisi panelinden kaldırmaktır. Güncellemeden sonra (3-7 gün) site arama motoru tarafından erişilemez hale gelecektir. Web yöneticisi paneli, Yandex (https://webmaster.yandex.ru/delurl.xml) ve Google (https://webmaster.yandex.ru/delurl.xml) arama motorları için kullanılabilir.
