Ein Crawler, auch Spider oder Bot genannt, ist ein automatisiertes Programm, das das Internet durchsucht und Webseiten indexiert. Suchmaschinen verwenden Crawler, um neue Seiten zu finden und Informationen über sie zu sammeln.
Crawler
Startseite » Glossary » C »