En crawler er et andet navn for en søgemaskine-robot, der søger internettet igennem for hjemmesider og deres indhold. Crawlere identifcerer sig ofte som crawlere, når de kommer ind på en hjemmeside, og de kan derfor nemt spores via din hjemmesides statistikprogram.
Hvad er Crawling?
Seneste kommentarer