OZ webdesign

     Mai este denumit spider, bot, crawler. Software “trimis” de Motorul de cautare pt. a “Naviga” si a analiza continut site-urilor. Cauta si prin Newsgroupuri. Extrag coloane de text pe care le introduc in baza de date a motoarelor de cautare. Robotul de la Google este Googlebot.
Primele cuvinte cheie sunt cele mai importante.