A Google keresési tanácsadója, John Mueller megosztotta meglátásait a széles körben elterjedt feltérképezési problémák diagnosztizálásával kapcsolatban.
Ezt az útmutatást egy Adrian Schmidt által a LinkedInen jelentett zavarra válaszul osztották meg. A Google feltérképező robotja egyszerre több domainjéhez is leállította a hozzáférést.
A megszakítás ellenére Schmidt megjegyezte, hogy a Search Console-on keresztüli élő tesztek továbbra is hibaüzenetek nélkül működtek.
A vizsgálatok azt mutatták, hogy nem nőtt az 5xx hibák, illetve a robots.txt kérelmekkel kapcsolatos problémák.
Mi lehet a probléma?
Mueller válasza
A helyzet kezelésére Mueller a közös infrastruktúrát jelölte meg, mint valószínű okot:
„Ha egy csomó tartomány között meg van osztva, és valamire összpontosít, például a feltérképezésre, akkor valószínűleg egy megosztott infrastruktúra problémája lehet. Ha már helyreáll, akkor legalább már nem sürgős, és van egy kis ideje, hogy beletúrjon a legutóbbi módosításokba / infrastruktúranaplókba.”
Infrastruktúra vizsgálat
Az összes érintett webhely a Cloudflare-t használta CDN-ként, ami felvonta a szemöldökét.
Amikor a hibakeresésről kérdezték, Mueller azt javasolta, hogy ellenőrizze a Search Console adatait annak megállapítására, hogy a DNS vagy a sikertelen kérések okozzák-e a problémát.
Mueller kijelentette:
„A Search Console feltérképezési statisztikái is egy kicsit többet fognak mutatni, talán segít eldönteni, hogy mondjuk a DNS és a meghiúsult kérések között.
Arra is rámutatott, hogy az időzítés kulcsfontosságú támpont:
„Ha mindez pontosan egy időben, akkor nem a robots.txt lenne, és valószínűleg nem a DNS.”
Hatás a keresési eredményekre
A keresés láthatóságát illetően Mueller megnyugtatta, hogy az ilyen jellegű zavarok nem okoznak problémát:
„Ha ez a mai napról szól, és csak néhány óráig tartott, akkor nem számítanék látható problémákra a keresésben.”
Miért számít ez?
Ha a Googlebot hirtelen leállítja a több webhely egyidejű feltérképezését, nehéz lehet azonosítani a kiváltó okot.
Noha az ideiglenes feltérképezési szünetek nem feltétlenül befolyásolják azonnal a keresési rangsort, megzavarhatják a Google képességét az új tartalom felfedezésére és indexelésére.
Az incidens rávilágít arra a sebezhetőségre, amellyel a szervezetek anélkül szembesülhetnek, hogy észrevennék, különösen azok, amelyek megosztott infrastruktúrára támaszkodnak.
Hogyan segíthet ez Önnek
Ha idővel a Googlebot leállítja a webhelyek feltérképezését:
- Ellenőrizze, hogy a probléma egyszerre több webhelyet érint-e
- Először nézze meg megosztott infrastruktúráját
- Használja a Search Console-adatokat az ok szűkítéséhez
- Ne zárja ki a DNS-t csak azért, mert a normál forgalom jól néz ki
- Tartsa szemmel a naplókat
Ha valaki több webhelyet üzemeltet egy CDN mögött, győződjön meg arról, hogy:
- Jó naplózási beállításokat
- Figyelje a feltérképezési sebességet
- Tudja, kit hívjon, ha a dolgok félrecsúsznak
- Kövesse nyomon infrastruktúra-szolgáltatóját