Tento celý proces se dělá samozřejmě proto, aby výsledek vyhledávání byl co nejvíce relevantní se zadanými klíčovými slovy, které uživatel zadá do pole pro vyhledávání.
Vyhledávací roboti se liší vyhledávač od vyhledávače. Vyhledávací robot se dělí na tři části:
Jak pracuje vyhledávací pavouk - crowler
Vyhledávací spider - crawler prochází neustále pomocí odkazů webové stránky (celou plantáž) a hledá nové nebo změněné webové stránky. Tímto způsobem prohledá celý internet.
Na nalezených stránkách stahuje veškerý obsah, který se dále indexuje - ukládá do databáze.
Indexace webových stránek
Nalezené nové stránky nebo změny zaznamenává - indexuje a ukládá do obrovské databáze vyhledávače.
Pomocí indexace se obsah od crowlera uspořádá podobně jako rejstřík v knize. U každého klíčového slova jsou jednotlivé stránky kde toto slovo našel.
Procesu indexování se také říká kuchyň, jelikož jsou zde data již uspořádána a seřazena podle abecedy.
Takto sesumarizovaná data jsou připravena pro výdej (jídelnu) - SERP.
Systém hodnocení vyhledávacího robota
Algoritmus pro hodnocení stránek není znám, je u každého vyhledávače jiný a je velice pečlivě střežen.
Vyhledávací robot s propracovanými a sofistikovanými algoritmy hodnocení, snadno zjistí podvodné stránky tzv. Black hat SEO a penalizují je.
Nejúčinější je věnovat svoji pozornost při vytváření webových stránek on-page faktorům, případně pak off-page faktorům.
Roboti nefungují jako například internetové katalogy, kde si nové stránky zaregistrujeme a pozici stránek ovlivňujeme příplatkem u provozovatele.
Zdroje