Googles Crawl-Limit beträgt jetzt 2 MB.
Prüfe, ob dein HTML-Inhalt vom Indexierungs-Bot abgeschnitten wird.
Über das 2MB-Limit
HTML-Dateien: Googlebot stoppt das Crawling einer HTML-Datei nach den ersten 2 MB. Inhalte nach diesem Limit werden nicht indexiert. Das Limit gilt für unkomprimierte Daten.
Ressourcen: Jede im HTML referenzierte Ressource (CSS, JavaScript) wird separat abgerufen und unterliegt demselben 2-MB-Limit.
PDF-Dateien: Googlebot ist bei PDFs großzügiger und crawlt die ersten 64 MB.
“Sobald das Limit erreicht ist, unterbricht Googlebot den Abruf und sendet nur den heruntergeladenen Teil zur Indexierung.”
— Google Search Central