Instruowanie wyszukiwarek

autor: Patryk 'yarpo' Jar, ostatnia modyfikacja: 2007-02-21

szukaj: meta tagi plik robots.txt robots.txt

Powszechnie przyjęło się, że wyszukiwarkom można cokolwiek zlecać za pomocą specjalnych meta-tagów. Otóż nic bardziej mylnego!

Wyszukiwarce nie możesz zlecić powrotu na stronę za 2 dni, ani też - przy użyciu metatagów - zabronić jej odwiedzenia wszstkich stron serwisu.

A oto te niby-działające meta-tagi:

<meta name="robots" content="index,follow" />
<meta name="revisit-after" content="1 days" />

Pierwsza linijka powyższego kodu nakazuje - raczej, chciałaby móc nakazać - robotowi indeksującemu stronę jego zachowanie. To nie działa.

Druga linijka karze ponownie odwiedzić stronę za 1 dzień. Oczywiście także bezużyteczne.

O ile drugi meta-tag jest całkowicie bezużyteczny, to pierwszy można zastąpić odpowiednim plikiem. Plik ten nazywa się 'robots.txt'. Powinien zostać umieszczony w głównym katalogu na serwerze, czyli url tego pliku wygląda: http://strona.pl/robots.txt. Wyszukiwarka najpierw odczytuje informacje zawarte w tym pliku, a dopiero potem zaczyna indeksować stronę.

Plik 'robots.txt' można utworzyć w zwykłym edytorze tekstowym, np. Notatniku. A wygląda on tak:

User-agent: *
Disallow: /

Powyższy kod zablokuje możliwość indeksowania całej strony, dla wszystkich wyszukiwarek [gwiazdka przy User-agent].

Jeśli byś chciał wykluczyć z indeksowania pojedynczy folder, lub nawet pojedynczy plik, należy to zrobić tak:

User-agent: *
Disallow: /folder
Disallow: /folder2/plik_tajny.htm

Nie ma żadnych metatagów "wzmacniających" pozycjonowanie (oczywiście keywords, czy description mają w niektórych przeglądarkach wpływ na wyniki, ale nie nakazują niczego wyszukiwarce). Są jedynie takie, którymi możesz wykluczyć pewne fragmenty serwisu z procesu pozycjonowania.

Patryk 'yarpo' Jar

szukaj: meta tagi plik robots.txt robots.txt

Osoby czytające tę publikację przeglądały również:

Chcesz zostać programistą?

Poznaj 6 kroków do efektywnej
nauki programowania!