Betekenis

Crawlen is het proces waarbij een zoekmachine het internet afspeurt op zoek naar nieuwe informatie. De zoekmachine doorloopt daarbij de gehele website, voor zover dit op de website mogelijk is gemaakt. Door websites te crawlen leert de zoekmachine of er veranderingen hebben plaatsgevonden en er informatie op pagina’s gewijzigd is.

Onwise - We are On it Onwise - We are On it