Web-Crawler - Was ist die "Internet-Spinne" und was macht sie?
Gespeichert von mekadmin am Mai 15, 2022 - 12:00amWeb Crawler - First Things First
Was ist ein Crawler?
Ein (Web-) Crawler ist ein Suchmaschinen-Roboter, der durch das Internet wandert und Informationen über Websiten sammelt. Die Seiten werden dann in Indizes angelegt. Die Seite wird also indexiert.
