Pozycjonowanie stron

Dla pozycjonerów największe znaczenie ma z pewnością element przeszukujący – jest to Crawler (po polsku „pajączek”). Działa w ten sposób, że znajduje strony i przegląda je, wybierając to, co może być użyte do ustalenia pozycji danej witryny w rankingu. Dla Crawlera liczy się więc np. zawartość słów kluczowych, ich miejsce w kodzie strony, ważność (na przykład, inaczej traktowane jest występowanie fraz w tytule, a inaczej w nagłówku lub w zwykłym tekście). Sprawdzane są też użyte na stronie łącza. Jeżeli linki prowadzą do podstron, te zostaną przeanalizowane podobnie jak strona główna. Nie znaczy to jednak, że element przeszukujący dociera do dowolnych podstron, umieszczonych zbyt głęboko. Istnieje zasada, że należy tak konstruować witrynę, żeby najważniejsze informacje na niej były widoczne jak na dłoni. To samo dotyczy podstron – jeżeli są bardzo istotne, trzeba umieszczać linki do nich bezpośrednio na stronie głównej. W takim przypadku na pewno zostaną one zauważone przez Crawlera i dopisane do bazy danych wyszukiwarki. Z tego powodu skuteczne pozycjonowanie stron www musi być oparte o optymalizację kodu witryny oraz usprawnienie nawigacji.