Aby zapobiec pojawianiu się strony w wynikach wyszukiwania, możesz dodać do jej kodu HTML metatag NOINDEX lub zwrócić nagłówek NOINDEX w żądaniu HTTP.
Gdy Googlebot znajdzie ten tag lub nagłówek, całkowicie strona zostanie wyeliminowana z wynikó wyszukiwania Google.
Nie możesz blokować strony w pliku robots.txt, jeśli chcesz by instrukcja NOINDEX działała poprawnie. Jeśli będzie strona blokowana przez plik robots.txt, to strona może nadal być wyświetlana w wynikach wyszukiwania Google.
Instrukcję NOINDEX możesz zastosować dla danej strony na 2 sposoby:
TAG <meta>
Umieść w sekcji <head> strony metatag:
Dla większości robotów:
<meta name=”robots” content=”noindex”>
Tylko dla robota Google:
<meta name=”googlebot” content=”noindex”>
Nagłówek odpowiedzi HTTP
HTTP/1.1 200 OK (…) X-Robots-Tag: noindex (…) Źródło: https://support.google.com/webmasters/answer/93710
Views: 0