Crawler
En crawler er en robot, som søgemaskiner bruger til at gennemgå og forstå hjemmesider, så de kan indekseres og vises i søgeresultater.
En crawler er en robot, som søgemaskiner bruger til at gennemgå og forstå hjemmesider, så de kan indekseres og vises i søgeresultater.