Niemal każdy webmaster stara się zoptymalizować strony swojej witryny w taki sposób, aby uzyskać jak najwięcej zaindeksowanych elementów. Ale w niektórych przypadkach wręcz przeciwnie, musisz ukryć niektóre strony, na przykład formularz do wprowadzania danych rejestracyjnych, odzyskiwania haseł itp.
Czy to jest to konieczne
Edycja pliku Robots.txt
Instrukcje
Krok 1
Najłatwiejszym sposobem zamknięcia indeksowania kilku sekcji lub konkretnej całej witryny jest dokonanie odpowiednich wpisów w pliku robots.txt. Jest używany jako przewodnik dla wyszukiwarek. Podczas wchodzenia na strony witryny robot wyszukiwania odwołuje się do tego pliku, jeśli go tam nie ma, indeksuje całą witrynę, w przeciwnym razie postępuje zgodnie z zaleceniami określonymi w tym pliku.
Krok 2
Jeśli sam stworzyłeś swoją witrynę, a nie masz takiej aplikacji, w postaci dokumentu tekstowego wskazującego na zakazy, łatwo jest stworzyć ją samodzielnie. Otwórz nowy dokument tekstowy, na przykład za pomocą programu Notatnik. Umieść następujące wiersze w treści dokumentu: User-agent: * Disallow: /file.htmlDisallow: /katalog /
Krok 3
Teraz zastanówmy się, o co zapytałeś wyszukiwarkę jako zadanie. Znak "*" naprzeciw agenta użytkownika oznacza, że ta instrukcja musi być wykonana przez absolutnie wszystkie systemy plików. Na przykład, jeśli napiszesz „Yandex” zamiast „*”, to odwołanie zostanie odczytane tylko przez robota wyszukiwarki Yandex. Instrukcje Disallow zabraniają indeksowania określonej sekcji (katalogu) lub pliku (pliku.html).
Krok 4
Po skompilowaniu pliku robots.txt możesz przejść bezpośrednio do tekstów na stronach serwisu. Jak wiesz, wyszukiwarki nie lubią mieć na swoich stronach więcej niż 3 aktywnych linków zewnętrznych. Co jeśli potrzebujesz krwotoku z nosa, ale opublikuj 5 lub więcej linków. W takich przypadkach możesz użyć atrybutu lub tagu.
Krok 5
Aby zamknąć linki z indeksowania przez wyszukiwarkę Google, należy doprowadzić link do postaci: anchor links. Treść atrybutu musi być wstawiona do dowolnej części linku, nie zapominając o oddzieleniu go spacją, tj. atrybut może być umieszczony między „a” i „href” lub między linkiem a kotwicą.
Krok 6
Aby zamknąć linki z indeksowania przez wyszukiwarkę Yandex, musisz wprowadzić link do następującej postaci: link do kotwicy. Znacznik umieszczany jest na początku i na końcu linku. Nie zapominaj, że ten tag jest sparowany: druga część, w przeciwieństwie do pierwszej, ma znak „/”.
