Warum steigt die Last nach dem Wechsel manchmal an?

Ein Content Delivery Network, kurz CDN, liefert Websiteinhalte über verteilte Server aus. Besucher erhalten Dateien von einem nahen Netzknoten. Der eigentliche Webserver mit den ursprünglichen Inhalten heißt Ursprungsserver. Er bleibt die Quelle, aus der das CDN fehlende oder veraltete Inhalte abruft.

Google beschrieb am 11. November 2026 einen möglichen Effekt direkt nach der Umstellung. Die schnellen Antworten des CDN signalisieren dem Crawling-System eine belastbare Website. Besteht genügend Crawlbedarf, kann Google seine Abrufrate schrittweise erhöhen. Gleichzeitig ist der neue Zwischenspeicher anfangs noch leer. Dadurch erreicht ein Teil der ersten Anfragen weiterhin den Ursprungsserver.

Ein Cache Miss erklärt die erste Belastung

Findet ein CDN die angeforderte Datei im eigenen Zwischenspeicher, kann es sie direkt ausliefern. Dieser Fall heißt Cache Hit. Fehlt die Datei, entsteht ein Cache Miss. Das CDN ruft sie am Ursprungsserver ab, speichert eine geeignete Kopie und beantwortet danach weitere passende Anfragen aus dem Cache.

Cloudflare dokumentiert denselben Ablauf für seinen Cache-Status. MISS bedeutet dort, dass eine grundsätzlich speicherbare Ressource zum Zeitpunkt der Anfrage noch nicht im Cache lag und deshalb vom Ursprungssystem geliefert wurde. Dynamische Inhalte oder bewusst ausgeschlossene Dateien können weiterhin direkt vom Ursprungsserver kommen.

BeobachtungMögliche ErklärungPrüfung
Viele MISS AntwortenDer Zwischenspeicher ist noch kalt oder die Ressource wird selten angefragtCache-Status und Regeln kontrollieren
Steigende Origin LastErste Abrufe vieler verschiedener URLs erreichen den UrsprungServerprotokolle und Ressourcen beobachten
Crawler erhalten FehlerFirewall, Botregel oder Überlastung blockiert AnfragenStatuscodes und verifizierte Bots prüfen

Warum Crawler anders wirken als Besucher

Menschen rufen meist eine kleine Gruppe beliebter Seiten auf. Diese Adressen landen schnell im Zwischenspeicher. Crawler untersuchen dagegen viele unterschiedliche URLs. Jeder erste Abruf einer noch unbekannten Adresse kann deshalb einen Cache Miss auslösen.

Ein Lastanstieg nach der Umstellung belegt noch keine Fehlfunktion. Er muss jedoch beobachtet werden. Entscheidend sind die Antworten des Ursprungsservers, die Cache-Trefferquote, Fehlerraten und die tatsächlichen anfragenden Clients. Eine Vermutung aufgrund eines einzelnen Diagramms reicht für eine Sperrregel nicht aus.

Pauschale Bot-Regeln können Google aussperren

Eine Web Application Firewall kann automatisierte Anfragen filtern. Eine pauschale Schutzregel behandelt unter Umständen auch gewünschte Crawler als verdächtig. CAPTCHA Seiten helfen hier nicht, weil Googlebot solche Aufgaben nicht löst. Dauerhafte Fehler oder Herausforderungen können dazu führen, dass wichtige Inhalte nicht mehr zuverlässig abgerufen werden.

Google empfiehlt, verifizierte Crawler in CDN und Firewall gezielt zuzulassen. Unerwünschte Bots lassen sich getrennt behandeln. Die robots.txt Datei kann Crawlingregeln ausdrücken, ersetzt aber keine Laststeuerung am Server und keine Prüfung der anfragenden Systeme.

Beispiel: Händler vor einer saisonalen Kampagne

Annahme: Ein mittelständischer Händler stellt seine Website vor einer saisonalen Kampagne auf ein CDN um. Die Website umfasst Produktseiten, Ratgeber, Bilder und ältere Kampagnenadressen. Diese Annahme ist frei erfunden und stellt keinen Kundenfall dar.

Das Team prüft vor dem DNS-Wechsel, welche Inhalte gespeichert werden dürfen und welche Seiten besonders häufig besucht oder gecrawlt werden. Es ruft eine begrenzte Auswahl wichtiger Adressen kontrolliert über das neue CDN auf. Danach beobachtet es Cache-Status, Antwortzeiten, Fehlercodes und die Last des Ursprungsservers.

Steigt die Last, prüft das Team zuerst, ob viele Cache Misses auftreten und ob verifizierte Crawler korrekte Antworten erhalten. Eine Bot-Blockade wird erst nach dieser Zuordnung angepasst. So bleibt nachvollziehbar, ob Cache-Aufbau, Konfiguration oder eine tatsächlich unerwünschte Quelle die Belastung verursacht.

Wann eine kurzfristige Bremse vertretbar ist

Überlastet Google Crawling den Ursprungsserver kritisch, nennt Google 429 und 503 als vorübergehende Statuscodes. Sie reduzieren die Crawlingrate für den gesamten Hostnamen. Ein Retry After Header kann zusätzlich angeben, wann ein erneuter Versuch sinnvoll ist.

Diese Maßnahme ist für wenige Stunden oder höchstens ein bis zwei Tage vorgesehen. Eine längere Verwendung kann dazu führen, dass Seiten seltener aktualisiert oder aus dem Index entfernt werden. Der Einsatz braucht daher eine dokumentierte Ursache, Überwachung und einen festen Zeitpunkt zur Rücknahme. Er ist kein regulärer Ersatz für ausreichende Kapazität und passende Cache-Regeln.

Checkliste für den kontrollierten CDN-Umzug

Die technische Umstellung sollte als begrenztes Betriebsprojekt geplant werden. Diese Punkte schaffen eine prüfbare Grundlage.

  • Ursprungsserver, CDN, DNS und Firewall mit klaren Zuständigkeiten dokumentieren.
  • Festlegen, welche Inhalte das CDN speichern darf und welche dynamisch bleiben.
  • DNS Einträge und ihre Time to Live vor dem Wechsel prüfen.
  • Wichtige und häufig gecrawlte URLs kontrolliert über das neue CDN abrufen.
  • Cache Hit, Cache Miss, Antwortzeit und Fehlerquote getrennt beobachten.
  • Zugriffe in Server-Protokollen nach Quelle, URL und Statuscode auswerten.
  • Verifizierte Crawler in Firewall und Bot-Regeln korrekt behandeln.
  • robots.txt und bestehende Indexierungsregeln unverändert erreichbar halten.
  • 429 oder 503 nur für einen echten Engpass und für kurze Zeit vorbereiten.
  • Rücknahmeplan und verantwortliche Person für die Umstellung festlegen.
  • Nach dem Wechsel wichtige Seiten, Weiterleitungen und Formulare öffentlich prüfen.
Auf LinkedIn teilen ↗