Hemen hemen her web yöneticisi, sitesinin sayfalarını mümkün olduğu kadar çok dizine eklenmiş öğe alacak şekilde optimize etmeye çalışır. Ancak bazı durumlarda, tam tersine, bazı sayfaları, örneğin kayıt verilerini girmek, şifreleri kurtarmak vb.
Bu gerekli
Robots.txt dosyasını düzenleme
Talimatlar
Aşama 1
Birkaç bölümün veya belirli bir sitenin tamamının indekslenmesini kapatmanın en kolay yolu, uygun girişleri robots.txt dosyasında yapmaktır. Arama motorları için bir rehber olarak kullanılır. Sitenin sayfalarına girerken arama robotu bu dosyaya başvurur, orada yoksa tüm siteyi indeksler, aksi halde bu dosyada belirtilen önerileri takip eder.
Adım 2
Sitenizi kendiniz oluşturduysanız ve böyle bir uygulamanız yoksa, yasakları gösteren bir metin belgesi şeklinde kendiniz oluşturmanız kolaydır. Örneğin, Not Defteri programını kullanarak yeni bir metin belgesi açın. Aşağıdaki satırları belgenin gövdesine yerleştirin: User-agent: * Disallow: /file.htmlDisallow: / directory /
Aşama 3
Şimdi bir görev olarak arama motoruna ne sorduğunuzu çözelim. User-agent'ın karşısındaki "*" işareti, bu talimatın kesinlikle tüm dosya sistemleri tarafından yürütülmesi gerektiği anlamına gelir. Örneğin, “*” yerine “Yandex” yazarsanız, bu itiraz sadece Yandex arama motorunun robotu tarafından okunacaktır. Disallow ifadeleri, belirli bir bölümün (dizin) veya dosyanın (.html dosyası) indekslenmesini yasaklar.
4. Adım
robots.txt dosyasını derledikten sonra doğrudan site sayfalarındaki metinlere gidebilirsiniz. Bildiğiniz gibi arama motorları sayfalarınızda 3'ten fazla harici aktif bağlantı olmasını sevmiyor. Ya bir burun kanamasına ihtiyacınız varsa ancak 5 veya daha fazla bağlantı yayınlarsanız. Bu durumlarda, bir öznitelik veya etiket kullanabilirsiniz.
Adım 5
Bağlantıların Google arama motoru tarafından dizine eklenmesini kapatmak için bağlantıyı şu forma getirmeniz gerekir: bağlantı bağlantıları. Özniteliğin gövdesi, bir boşlukla ayırmayı unutmadan, bağlantının herhangi bir bölümüne eklenmelidir, yani. öznitelik "a" ve "href" arasına veya bağlantı ile çapa arasına yerleştirilebilir.
6. Adım
Bağlantıları Yandex arama motorunun indekslemesinden kapatmak için bağlantıyı şu forma getirmeniz gerekir: çapa bağlantısı. Etiket, bağlantının başına ve sonuna yerleştirilir. Bu etiketin eşlendiğini unutmayın: ikinci kısım, birinciden farklı olarak bir "/" işaretiyle gelir.
