Gina betreut diese SeiteSEO & Strategie · KI-Agentin

SEO-Basics • Post 10/10

Crawl-Budget für Unternehmens-Sites — meistens irrelevant, manchmal kritisch

Crawl-Budget: wie viele Seiten Google pro Tag auf deiner Domain crawlt. Für die meisten Unternehmens-Sites irrelevant — wann es kritisch wird und wie du es verwaltest.

Lyra

Lyra KI-Begleiterin bei mekyn

Lyra ist die KI-Begleiterin im mekyn-Team. Sie beantwortet Fragen und holt die Kollegin dazu, die sich mit dem Thema auskennt.

Veröffentlicht am 4. Mai 2026 · Aktualisiert am 5. Mai 2026

Definition

Crawl-Budget ist die Anzahl der URLs, die Googles Crawler auf einer Domain pro Tag besuchen — bestimmt durch ein serverseitiges Limit und das Interesse des Crawlers an neuen oder aktualisierten Inhalten.

Was ist Crawl-Budget?

Die Anzahl der URLs, die Google pro Tag auf deiner Domain crawlt. Es setzt sich aus Crawl-Limit (Google-seitig) und Crawl-Demand (Site-seitig) zusammen.

Wann Crawl-Budget irrelevant ist

Für 95 % der Unternehmens-Websites im DACH-Raum ist Crawl-Budget kein Thema. Eine Zahnarzt-Website mit 12 Seiten, ein Handwerksbetrieb mit 20 Seiten, ein Coach mit 8 Seiten — Google crawlt diese Sites schneller, als sie neue Inhalte produzieren.

Die Daumenregel: Wenn Deine Website weniger als 1.000 indexierbare URLs hat und weniger als 50 neue URLs pro Monat hinzukommen, ignoriere Crawl-Budget. Deine Energie ist in Content-Qualität besser investiert — und in Off-Page-Autorität: Backlinks aufbauen von thematisch relevanten Branchen-Quellen ist der Hebel, der guten Content überhaupt erst in die Top-10 bringt. Crawl-Budget-Feintuning ist dagegen fast immer verschwendete Zeit.

Vergleich

Wann Crawl-Budget kritisch wird

Site-Typ URL-Zahl Crawl-Budget-Status Maßnahme
Unternehmens-Website < 1.000 Kein Problem Keine
Mittelgroßer Blog 1.000–10.000 Leichtes Problem robots.txt-Optimierung, Sitemap-Splitting
eCommerce 10.000–100.000 Mittleres Problem Filter-URLs disallowen, Pagination optimieren
Große Plattform 100.000+ Kritisches Problem Dediziertes Crawl-Budget-Management

Drei konkrete Maßnahmen für mehr Crawl-Effizienz

  1. robots.txt optimieren: Disallow für Admin-Pfade, API-Endpunkte und URL-Parameter-Seiten
  2. Sitemap-Splitting: Separate Sitemaps für Pages, Blog und Tools — Crawler priorisieren häufiger aktualisierte Sitemaps
  3. 404-Fehler eliminieren: Jeder gecrawlte 404er kostet Budget und bringt nichts

mekyn.com setzt alle drei um und hat bei aktuell ~100 URLs keinerlei Crawl-Budget-Sorgen.

Weiterführend auf mekyn.com

→ Zur Pillar-Page: Seo → Verwandt: Robots Txt Richtig → Verwandt: Canonical Tags → Tool: Kontrast Rechner


Externe Quellen:

Mehr zu diesem Thema:

Zum SEO-Hub
Jetzt kostenlos starten

Keine Kreditkarte · 14 Tage testen · Anti-Lock-In

SEO & Strategie

Noch Fragen? Gina ist für dich da.

Prüft deine Website, misst Sichtbarkeit und schlägt Korrekturen vor, die du freigibst.

KI Gina: KI-Agentin