Auch Crawler genannt, ist eine Art Computer, der alle Daten und Informationen einer Webseite „durchforstet“ und anhand von Kriterien prüft und gegebenenfalls bewertet. Mittels der robots.txt, NoIndex oder NoFollow können wir das Crawl-Verhalten steuern.
Bot
Der SEO-Glossar informiert Sie über die wichtigsten Begriffe der Suchmaschinenoptimierung. Weitere wichtige Erklärungen erhalten Sie auch zum Thema Webdesign und WordPress.
Web Glossar als PDF herunterladen
Abonniere unser Minuten-Mail und erhalte zwei Mal im Monat kurz und knackig Tipps für deine digitale Kommunikation. Kostenlos, persönlich und per Du.