forumNeues Thema

Search Console zeigt Seiten mit Status 'Nicht gecrawlt' — warum besucht Google sie nicht?

HHavva Y***TeilnehmerCommunity-Mitglied
Beigetreten
Jan. 2023
Nachricht
354
#1

Etwa 100 Seiten auf unserer Site bleiben im Status 'Nicht gecrawlt'. Heißt wohl, Google war da noch nie. Aber sie sind in der Sitemap und haben interne Links. Warum besucht Google diese Seiten nicht?

Ich weiß, dass das Crawling großer Sites dauert, aber so extrem sollte es nicht sein. Manche Seiten stehen seit 2 Monaten auf 'Nicht gecrawlt'. Wird Google die wirklich noch crawlen oder hat er sie vergessen?

Gibt es da nicht sowas wie Crawl Budget? Stößt Google beim Crawling meiner Site an ein Limit? Was müssen wir tun, damit die gecrawlt werden?

PPerihan K***Teilnehmer
Funktion
Produktmanager
Branche
Catering
Organisationsform
Firma mit 20 Mitarbeitern
Beigetreten
Feb. 2024
Nachricht
220

Doki · Unternehmenswebsite · 2024

Nützlichste Antwort#2

Dass Google die 'Nicht gecrawlt'-Seiten auf eurer Site nicht besucht, liegt meist am Crawl-Budget. Google investiert nur begrenzte Zeit ins Crawling eurer Seiten; wenn die Site sehr groß oder langsam ist, schafft Google es ggf. nicht, alle Seiten zu crawlen.

So erhöht ihr das Crawl-Budget: 1) Ladezeiten verbessern — CDN nutzen, Bilder komprimieren. 2) Site-Schlankheit erhöhen — unnötige Seiten löschen oder weiterleiten. 3) Interne Navigation vereinfachen — tief liegende Seiten (deep depth) zugänglich machen. 4) Sitemap optimieren — nur wichtige Seiten aufnehmen.

Schaut außerdem in der Search Console unter 'Verstehen, wie unsere Website gecrawlt wird'. Da seht ihr, wie viele Seiten Google gecrawlt hat und wie viel Zeit er dafür aufgewendet hat. Wenn die Crawling-Zeit hoch ist, habt ihr ein Leistungsproblem auf der Site.

EElifTeilnehmer
Funktion
Inhaber einer Café-Kette
Organisationsform
Produktionsunternehmen mit 40 Mitarbeitern
Beigetreten
Aug. 2024
Nachricht
63

Doki · Incident-Response-Support · 2024

#3

Ich hab seit 6 Monaten auch nicht gecrawlte Seiten. Dachte schon das läuft ins Leere... Aber mein Berater meinte: Google braucht zu lang fürs Crawling die Performance ist zu niedrig. Hab mein Hosting upgegradet und seitdem crawlt Google wieder fleißig.

VVeli P***Experte
Funktion
Produktmanager
Branche
Textil
Organisationsform
Filialkette
Beigetreten
Dez. 2024
Nachricht
23
#4

Gründe für den Status 'Nicht gecrawlt': - Schlechte Crawling-Fähigkeit der Site (zu hohe Link-Tiefe) - Hohe Ladezeiten - Sitemap nicht optimiert (zu viele URLs) - Unzureichende Anweisungen in der robots.txt - Server-Timeouts - Ganz neue Seiten (frisch veröffentlicht)

OOsman K***VeteranCommunity-Mitglied
Beigetreten
Feb. 2026
Nachricht
279
#5

hab auch nicht gecrawlte seiten. wenns am crawl budget liegt, heißt das die site ist zu groß und hosting ist ok aber wenn die site zu groß ist, wirds problematisch.

OOrhan D***Experte
Funktion
Verkäufer im Einzelhandel
Branche
IT-Dienstleistungen
Organisationsform
neu gegründetes Startup
Beigetreten
Nov. 2024
Nachricht
228
#6

Bei einer durchschnittlichen Site crawlt Google täglich 20-100 Seiten. Wenn ihr über 500 Seiten habt, kann es 2-3 Monate dauern, bis alle gecrawlt sind. Schnelle Sites mit wenigen Seiten werden natürlich viel schneller gecrawlt.

İİsmetTeilnehmer
Funktion
Logistikleiter
Beigetreten
Nov. 2023
Nachricht
112
#7

Quick Fix: 1) Findet die nicht gecrawlten Seiten in der Search Console. 2) Wählt die 10 wichtigsten aus. 3) Verlinkt jede davon direkt von der Startseite. 4) Dann sendet eine manuelle Indexierungsanfrage. Google fängt dann an, diese zu crawlen.

SSinan Y***VeteranCommunity-Mitglied
Beigetreten
Jan. 2024
Nachricht
243
#8

Wenn Google diese Seiten nicht crawlt, will er sie auch nicht im Index. Heißt: Der Großteil der Site reicht aus, da Nutzer die anderen Seiten ohnehin nicht finden, sieht Google keinen Grund, sie zu crawlen.

DDoruk Ç***Experte
Funktion
Netzwerkadministrator
Branche
Einzelhandel
Organisationsform
Boutique-Agentur
Beigetreten
Sept. 2024
Nachricht
1
#9

Das wusste ich nicht.

KKaan B***Teilnehmer
Funktion
Infrastruktur-Ingenieur
Beigetreten
März 2024
Nachricht
108
#10

Ich habe mich lange damit beschäftigt. Die bestehende Seite zu aktualisieren bringt schnellere Ergebnisse als eine neue zu erstellen.

Aus Erfahrung weiß ich das.

ÜÜlkü Y***Teilnehmer
Funktion
Logistikplanung
Branche
Lebensmittelgroßhandel
Organisationsform
Unternehmen innerhalb eines Konzerns
Beigetreten
Nov. 2024
Nachricht
84
#11

Es gab drei verschiedene Ansichten, die sich alle ergänzen. Schaut zuerst, welche Daten ihr bei der Entscheidungsfindung zur Hand habt.

Kein Prozess ohne Dokumentation verbessert sich, weil man nicht weiß, was man verbessern soll. Wenn ihr das Ergebnis hier postet, hilft es auch anderen.

JJülide S***TeilnehmerCommunity-Mitglied
Beigetreten
Nov. 2025
Nachricht
3
#12

Ich fasse das Thema mal zusammen, da es mehrere unterschiedliche Antworten gab. Je schwerer es ist eine Entscheidung rückgängig zu machen, desto langsamer solltet ihr sie treffen.

Der meiste Zeitverlust entsteht durch Arbeiten, die auf Freigaben warten. Das ist meine Meinung, ich behaupte nicht dass es absolut richtig ist.

VVildan B***Teilnehmer
Funktion
Produktionsplanung
Branche
Viehzucht
Organisationsform
Werkstatt
Beigetreten
Feb. 2023
Nachricht
388

Doki · Mobile App · 2023

#13

Gespeichert. halt fehler auf der nicht gecrawlt aktuell nicht in index aufgenommen-Seite sind meist rückgängig zu machen, aber teuer.

LLale T***Teilnehmer
Funktion
Supply-Chain-Manager
Branche
IT-Dienstleistungen
Organisationsform
Familienunternehmen
Beigetreten
Mai 2024
Nachricht
338
#14

Gespeichert.

TTaner A***Veteran
Funktion
Praktikant
Branche
Werbung und Marketing
Organisationsform
Betrieb mit zwei Filialen
Beigetreten
März 2025
Nachricht
406
#15

Es gibt auch noch die Mess-Seite. Wenn ihr es zum ersten Mal macht, fangt klein an, die Skalierung kommt später.

Der meiste Zeitverlust entsteht durch Arbeiten, die auf Freigaben warten. Das war's, entschuldige, wenn ich zu lang war.

SSelmaTeilnehmer
Funktion
Online-Shop
Beigetreten
Juli 2024
Nachricht
94
#16

Genau so ist es. Interne Verlinkung ist die günstigste und am meisten vernachlässigte Maßnahme.

Wenn ihr das Ergebnis hier postet hilft es auch anderen.

EEsra O***Teilnehmer
Funktion
Qualitätsmanager
Branche
Landwirtschaft
Organisationsform
Team mit 8 Personen
Beigetreten
Mai 2023
Nachricht
84
#17

Richtig. Lösungen, die im kleinen Maßstab funktionieren, brechen bei Wachstum zusammen, das habe ich spät gelernt.

Nur als Notiz, könnte nützlich sein.

SSelin A***TeilnehmerCommunity-Mitglied
Beigetreten
Jan. 2022
Nachricht
273
#18

Wie habt ihr das Problem gelöst? Entscheidend ist nicht die Zahl, sondern worauf sie sich bezieht.

İİlknur Y***VeteranCommunity-Mitglied
Beigetreten
Juli 2022
Nachricht
3
#19

Ich sehe das anders. Das Ranking des Wettbewerbers könnte nicht vom Inhalt kommen, sondern von der langjährigen Akkumulation.

Wenn es jemand anders macht, würde mich das auch interessieren.

VVeli K***Teilnehmer
Funktion
Lagerleiter
Branche
Logistik
Organisationsform
Ein-Personen-Unternehmen
Beigetreten
Juni 2022
Nachricht
204
#20

Die Diskussion ist abgeschweift, ich fasse mal zusammen. Scheut euch nicht zu fragen, wer nicht fragt, zahlt am Ende mehr.

Nur als Notiz, könnte nützlich sein.

Antwort schreiben