Strony każdej witryny są regularnie indeksowane przez roboty wyszukiwarek, które przetwarzają informacje o witrynie tak, aby były one dostępne na żądanie użytkowników w wyszukiwarkach. Wizyty odwiedzających z wyszukiwarek wpływają pozytywnie na ruch na stronie i stymulują rozwój zasobu. Ale jeśli w witrynie znajdują się strony, na których informacje nie są przeznaczone dla odbiorców internetowych (na przykład osobiste strony użytkowników lub strona rejestracji), wówczas przejście z wyszukiwarek na takie strony nie jest potrzebne i to lepiej jest zabronić indeksowania tych informacji.
Niezbędny
- - mieć własną stronę internetową
- - znać linki do stron, których indeksowanie powinno być zabronione.
- - mieć przynajmniej podstawową wiedzę z zakresu HTML
Instrukcje
Krok 1
Aby uniemożliwić robotowi wyszukiwania indeksowanie niektórych stron witryny, musisz wprowadzić zmiany w pliku robots.txt, jeśli jest już w Twojej witrynie, lub utworzyć ten plik.
Krok 2
Jeśli plik robots.txt został już przesłany do witryny i można go edytować bezpośrednio z panelu sterowania zasobów, otwórz plik robots.txt za pośrednictwem usługi sieciowej do edycji.
Krok 3
Jeśli nie ma możliwości wprowadzenia zmian w żądanym pliku bezpośrednio z panelu sterowania, otwórz robots.txt w przeglądarce, klikając link do tego pliku. Skopiuj wszystkie dane z otwieranej strony i wklej je do arkusza w Notatniku.
Krok 4
Jeśli w witrynie nie ma pliku robots.txt, otwórz program „Notatnik”, w nowym dokumencie, którego będziesz musiał wprowadzić niezbędny kod.
Krok 5
Na pustym arkuszu dokumentu tekstowego napisz pierwszy wymagany wiersz:
Agent użytkownika: *
Krok 6
Następnie przejdź do następnej linii, naciskając klawisz Enter i wpisz następujący kod:
Disallow: /index / page3Disallow: wskazuje brak indeksowania, a /index / page3 to łącze do strony, która nie musi być indeksowana. Zamiast linku/indeksu/strony3, wstaw link do strony swojej witryny, którą chcesz zablokować do przetwarzania przez roboty.
Krok 7
Zwróć uwagę, że na początku linku brakuje samej nazwy domeny; jej obecność we wpisie oznacza ukośnik. Podczas indeksowania witryny robot wyszukiwania automatycznie wstawia nazwę domeny do takich linków. Dlatego pisz w ten sposób linki do niezbędnych stron.
Krok 8
Po Disallow: możesz umieścić nie tylko link do określonej strony, ale także link do dowolnej sekcji lub katalogu witryny. Podobnie możesz zabronić indeksowania żądanej części witryny.
Krok 9
Jeśli konieczne jest uniemożliwienie robotom przetwarzania kilku różnych sekcji zasobu, napisz link do każdej sekcji lub strony w nowej linii, na początku której nie zapomnij umieścić wpisu Disallow:.
Krok 10
Aby zakończyć zmianę robots.txt, kliknij przycisk „Zapisz” podczas edycji pliku w panelu sterowania lub zapisz dokument tekstowy z wpisami pod nazwą robots.txt i prześlij ten plik do serwisu.
