Bazen bir web yöneticisinin dizine eklenen sayfalardan birini arama motorundan kaldırması gerekir. Çoğu zaman, bu işleme yanlışlıkla sayfa adresini site haritasının genel listesine girdikten sonra başvurulur. Bir zamanlar, Megafon şirketinden uzmanlar bu hatayla karşılaştı (sms mesajları Yandex arama motorunun herhangi bir kullanıcısı tarafından kullanılabilir hale geldi).
Bu gerekli
Kişisel sitesi
Talimatlar
Aşama 1
Kendi web sayfanızı arama motorlarının arşivlerinden kaldırmanın en kolay yollarından biri, fiziksel olarak silmek, konum adresini değiştirmek ve yanlışlıkla silmektir (silinen sayfanın özniteliğini ayarlamanız gerekir). Bu sayfayı dönüştürdükten sonra, arama robotu içerik yerine şu satırı görecek: HTTP / 1.1 404 Bulunamadı. Ancak arama robotlarının siteyi 3 saatte bir, belki 2-3 günde bir ziyaret edebileceğini unutmayın. Bu nedenle, sonucu almak için bir süre beklemeniz gerekir.
Adım 2
Bir sonraki yol, sitenize gelir gelmez tarayıcının yolunu belirleyen robots.txt dosyasını düzenlemektir. Bu metin belgesinin her zaman bir yeri vardır - sitenin kökü. İlk paragrafta, Yandex robotunun indeksleme parametreleri genellikle belirtilir (diğer robotlardan belirgin şekilde farklıdır), ikinci paragrafta diğer tüm arama motorları için.
Aşama 3
Paragrafın başında, "User-Agent: *" aracısının başlığını ve gizlenecek sayfaların adreslerini - "Disallow: /wp-content/foto/fotojaba.html" belirtmelisiniz. Aynı şekilde indekslemeden kapatmak istediğiniz sayfa veya bölümlerin adreslerini de belirtmelisiniz. Lütfen bu yöntemin hızlı sonuçlar vermediğini unutmayın. Sitenizin etkinliği düşükse ve haberler sosyal ağlarda yayınlanmıyorsa, yeni verilerin işlenmesi birkaç günlük bir süreyi bulabilir. Ayrıca, bu sayfaların sürümlerini arama hizmetinin arşivinden silmeniz gerekecektir.
4. Adım
Robots.txt dosyasındaki bağlantıları ayarlamak için alternatif bir yöntem, aynı ada sahip meta robots etiketini kullanmaktır. Bu etiketin sözdizimi şu şekildedir: eşleştirilmiş [head] ve [/head] etiketleri arasına yerleştirilmelidir. Robots değeri meta ad etiketine yerleştirilmelidir. Bir örnek şöyle görünür: