A Google bejelentette a feltérképező robot dokumentációjának frissítését, amely további információkat ad a gyorsítótárazásról, ami segít jobban megérteni, hogyan lehet optimalizálni a Google feltérképező robotjára. A megfelelő HTTP-gyorsítótárazási fejlécek bevezetésére vonatkozó új irányelvek követésével a keresőoptimalizálók és a megjelenítők javíthatják a feltérképezés hatékonyságát és optimalizálhatják a szerver erőforrásait.
Frissített bejáró dokumentáció
A feltérképező robotok dokumentációjában van egy rész, amely elmagyarázza, hogy a Google robotjai hogyan használják a HTTP-gyorsítótárazási mechanizmusokat, amelyek segítenek megtakarítani a számítási erőforrásokat mind a megjelenítők, mind a Google számára a feltérképezés során.
A dokumentáció kiegészítései jelentősen kibővítik a korábbi verziót.
Gyorsítótárazási mechanizmusok
A Google azt javasolja, hogy engedélyezze a gyorsítótárazást olyan fejlécekkel, mint az ETag és az If-None-Match, valamint opcionálisan a Last-Modified és If-Modified-Since, hogy jelezze, ha a tartalom megváltozott. Ez segíthet csökkenteni a szükségtelen feltérképezést és megtakarítani a szerver erőforrásait, ami mind a megjelenítők, mind a Google feltérképező robotjai számára előnyös.
Az új dokumentációban ez áll:
„A Google feltérképezési infrastruktúrája támogatja a HTTP-gyorsítótárazási szabvány által meghatározott heurisztikus HTTP-gyorsítótárazást, különösen az ETag-válasz- és az If-None-Match kérés fejlécen, valamint a Last-Modified válasz- és az If-Modified-Since kérésfejlécen keresztül.”
A Google Preference for Preference for ETag
A Google az ETag használatát javasolja a Last-Modified helyett, mivel az ETag kevésbé hajlamos az olyan hibákra, mint a dátumformázási problémák, és pontosabb tartalomellenőrzést biztosít. Azt is elmagyarázza, mi történik, ha az ETag és a Last-Modified válaszfejlécek is megjelennek:
„Ha a HTTP-válaszban az ETag és a Last-Modified válasz fejlécmezője is szerepel, a Google feltérképező robotjai az ETag értéket használják a HTTP-szabványnak megfelelően.”
Az új dokumentáció azt is kimondja, hogy más HTTP-gyorsítótárazási direktívák nem támogatottak.
Lásd még: 9 tipp a feltérképezési költségkeret optimalizálásához SEO-hoz
Változó támogatás a bejárók között
Az új dokumentáció elmagyarázza, hogy a gyorsítótárazás támogatása a Google feltérképező robotjai között eltérő. Például a Googlebot támogatja a gyorsítótárazást az újrafeltérképezéshez, míg a Storebot-Google korlátozott gyorsítótárazási támogatást nyújt.
A Google elmagyarázza:
„A Google egyes feltérképező robotjai és lekérői használhatják a gyorsítótárazást, vagy nem, a hozzájuk társított termék igényeitől függően. Például a Googlebot támogatja a gyorsítótárazást, amikor újra feltérképezi az URL-eket a Google Keresés számára, a Storebot-Google pedig csak bizonyos feltételek mellett támogatja a gyorsítótárazást.
Útmutató a végrehajtáshoz
A Google új dokumentációja azt javasolja, hogy segítségért vegye fel a kapcsolatot a tárhely- vagy CMS-szolgáltatókkal. Azt is javasolja (de nem követeli meg), hogy a megjelenítők állítsák be a Cache-Control válaszfejléc max-age mezőjét, hogy segítsenek a robotoknak tudni, mikor kell feltérképezni az adott URL-eket.
Teljesen új blogbejegyzés
A Google egy vadonatúj blogbejegyzést is közzétett:
December feltérképezése: HTTP gyorsítótár
Olvassa el a frissített dokumentációt:
HTTP gyorsítótár