Was ist das Crawl-Budget?
Kurz gesagt
Suchmaschinen schicken Programme durchs Internet, die Seiten einsammeln. Diese Programme heißen Crawler. Aber sie haben nicht unendlich viel Zeit für deine Website. Genau darum geht es beim Crawl-Budget.
Das Wichtigste in Kürze
- Crawler = Programm, das Seiten liest
- Es folgt Links von Seite zu Seite
- Gelesene Seiten landen im Index
- Begrenzte Zeit pro Website
- Nicht jede Seite wird täglich besucht
- Große Websites merken das stärker
- Wie schnell der Server antwortet
- Wie wichtig eine Seite wirkt
Zum Nachlesen: Was im Video sagt
EinleitungSuchmaschinen schicken Programme durchs Internet, die Seiten einsammeln. Diese Programme heißen Crawler. Aber sie haben nicht unendlich viel Zeit für deine Website. Genau darum geht es beim Crawl-Budget.
Der Crawler kommt zu BesuchEin Crawler ist ein Programm, das Websites besucht und ihren Inhalt liest. Es springt dabei über Links von einer Seite zur nächsten. Was es liest, kann danach in den Index wandern – das ist das große Verzeichnis, aus dem Suchergebnisse entstehen.
Crawl-Budget einfach erklärtDas Crawl-Budget ist die Menge an Seiten, die ein Crawler auf deiner Website in einer bestimmten Zeit anschaut. Stell dir eine Bibliothekarin vor, die heute nur zwei Stunden Zeit hat, um neue Bücher einzusortieren. Sie schafft nicht alles auf einmal – und genauso ist es beim Crawlen.
Wovon es abhängtZwei Dinge spielen zusammen. Wie viel dein Server verkraftet, ohne langsam zu werden, und wie interessant deine Seiten für die Suchmaschine wirken. Seiten, die sich oft ändern oder viele Links bekommen, werden meist häufiger besucht.
Wo Budget verschwendet wirdWenn der Crawler ständig auf Sackgassen und Dubletten stößt, verbraucht er Zeit für nichts. Das passiert oft bei Shops mit vielen Filtern, die immer neue Adressen erzeugen. Die wirklich wichtigen Seiten kommen dann später dran.
Für wen das wirklich zähltBei einer Website mit dreißig Seiten musst du dir um das Crawl-Budget kaum Gedanken machen. Spannend wird es bei Tausenden von Seiten, etwa in großen Shops oder Portalen. Und wichtig ist: Mehr Crawlen allein bringt kein besseres Ranking – es sorgt nur dafür, dass deine Seiten überhaupt bekannt werden.
Zum SchlussDas Crawl-Budget ist also die Aufmerksamkeit, die eine Suchmaschine deiner Website schenkt. Sorge mit klarer Struktur, schnellen Ladezeiten und wenig Doppeltem dafür, dass diese Zeit bei deinen besten Seiten landet.