Was ist ein Crawler?
Crawler ist die Bezeichnung für das System der Suchmaschinen welches Informationen von Webseiten sammelt. Hierfür werden Webinhalte speichert und indexiert um die Suchanfragen der Nutzer in Form von relevanten Suchergebnissen zu beantworten.
Was ist ein Crawling-Budget?
Im Beispiel des Google Crawlers (auch Googlebot oder Spider) erhält jede Seite eine Art Limit der Mittel für Anzahl der gecrawlten Seiten und Zeit. Das Crawl-Budget wird je Website durch Anzahl der Backlinks, Größe der Seite und mögliches Fehleraufkommen bestimmt.
Durch die Optimierung deiner Website durch meine SEO Betreuung kannst du das Crawling-Budget beeinflussen und dem Crawler die Lesbarkeit erleichtern.