A Google munkatársai, John Mueller és Martin Splitt megvitatták, mi történik, ha a spamküldők visszaélnek a webhelyek keresési funkcióival, és több ezer spam jellegű keresőoldalt hoznak létre. Azt mondták, hogy a Google elkezdi feltörtként kezelni ezeket az oldalakat.
Webhelykeresés spam és minőségi problémák
Gyakorlatilag minden webhely rendelkezik keresési funkcióval, és valami nem világos, hogy a keresősáv használata egy keresési eredményoldalt generál, amely tartalmazza a keresési lekérdezést. A meglepő az, hogy ezeknek a weboldalaknak az a normális viselkedése, hogy létrehoznak egy URL-t, amellyel hozzáférhet a kereséshez, és olyan helyzetet teremtve, amikor a spamküldő a keresősáv segítségével több ezer olyan weboldalt generálhat, amelyek megemlítik a spam jellegű márkát, az URL-t és a spammel kapcsolatos kulcsszavakat.
A Google Mueller szerint a webhelykereső spam minőségi problémává válhat, ha a spam oldalak indexelhetők vagy indexelhetők. Mueller azt a példát használta, hogy szöveget írt be a keresőmezőbe, hogy létrehozzon egy weboldalt, amely tartalmazza ezt a spam jellegű szöveget, ami megtörténhet.
Mueller szerint a keresési spam minőségi problémává válhat:
„Van egy helyen, ahol minőségi problémákba ütközhet a keresési eredményoldalakkal. Nevezetesen, ha megengedi az embereknek, hogy olyan dolgokat keressenek, amelyek teljesen irrelevánsak az Ön webhelye szempontjából, és a keresési eredményoldala ezeket a kifejezéseket tartalmazza a keresési eredményoldalon, és indexelhető.
…És nem annyira arról van szó, hogy valaki feltörte a webhelyét, hogy ezt megtegye, mert a webhelye ezt szabadon csinálja, és alapvetően azt mondja, hogy ó, keress fényképeket, itt egy fotó. De mivel ez minden felmerülő keresési kifejezésre elérhető, hirtelen felelősséget jelent. Inkább olyan, mint egy vektor, hogy mások spamezzenek.”
Az utolsó mondat arról, hogy a keresőmező a spamküldés vektorává válik, helyes, ha a weboldal lehetővé teszi az automatikusan generált oldalak indexelését.
A Google feltörtként jelölheti meg a belső keresőoldalakat
A másik hasznos információ, amelyet Mueller és Splitt osztott meg, az az, hogy az ilyen típusú spamet tartalmazó oldalakat feltörtnek jelölik, ami azt magyarázza, hogy az ilyen típusú oldalak megjelenhetnek a Google keresési eredményei között.
Mueller elmagyarázta:
„És azt láttuk, hogy az emberek nagy léptékben teszik ezt. Megpróbálják felismerni azokat a gyakori CMS-eket, amelyeknek nincs letiltva a keresési eredményoldala, és több millió oldalt tartalmazó webhelyek ezreire hivatkoznak, amelyek mindegyike tartalmazhat felnőtteknek szóló kifejezéseket, telefonszámot vagy gyógyszert és egy telefonszámot vagy valami mást, és egy táviratcímet vagy valamilyen más kapcsolatfelvételi mechanizmust, ahol nem az a cél, hogy a webhelyeden a fényképek és az emberek lássák, hanem az, hogy ezekhez a gyógyszerekhez hívják ezt a számot.
És néha ez megjelenik az ilyen jellegű lekérdezéseknél. És ha látjuk, hogy ez megtörtént, megjelölhetjük feltörtként. Így a Search Console-ban ezt feltörtként megjelölve láthatja.”
A Google algoritmikusan képes elkapni a spameket tartalmazó keresési eredményoldalakat
Mueller azt is elmagyarázta, hogy a Google képes algoritmikusan elkapni az ilyen típusú oldalakat, és megakadályozni, hogy megjelenjenek a keresési eredmények között. A webhely tulajdonosa részéről ez nyerésnek tűnhet, mert a Google kezelte. Mueller óva int attól, hogy feltételezzük, hogy a problémát megoldották.
Hogyan lehet megakadályozni a keresőmező spamjét
A Google Mueller és Splitt két megközelítést javasolt annak megelőzésére, hogy a keresési spam problémává váljon:
- Akadályozza meg a kúszást
- Az indexelés megakadályozása
A feltérképezés megakadályozása
Az első javaslat a robots.txt használata annak megakadályozására, hogy a Google és más keresőmotorok feltérképezzék az automatikusan generált keresőmezőket.
Mueller és Splitt négy okot sorol fel a robots.txt segítségével történő indexelés letiltására:
- A Google-nak nem kell feltérképeznie a keresési oldalakat.
- Megakadályozza a végtelen kúszást.
- Csökkenti a szerver terhelését.
- Megakadályozza a feltérképezés költségvetési pazarlását.
A végtelen feltérképezéssel kapcsolatban Martin Splitt elmondta, hogy a keresőmezők egyes megvalósításai végtelen „feltérképezési térré” változhatnak, ahol a keresőmező folyamatosan automatikusan generál weboldalakat egy „ugye értette” funkción keresztül, amely a Google által az adott keresőoldalak feltérképezésére reagálva aktiválódik.
Splitt elmagyarázza:
„Tehát megtudtunk egy csomó dolgot a webhelyeken található keresési eredményekről. Tehát végtelen feltérképezési helyek lehetnek, mert alapvetően oldalakat generálhatunk ezeknek az oldalaknak, és talán még linket is tudunk adni a like-hoz, gondoltad, és akkor még többet hozunk létre, amibe a bejáró belesül. És úgy tűnik, hogy viszonylag könnyű megszabadulni tőlük robots.txt és index nélkül.”
A végtelen feltérképezési terület problémája a szerverek megnövekedett terhelésével és a webhely feltérképezési költségvetésének terhelésével is összefügg.
John Mueller elmagyarázta, hogyan függ össze a végtelen feltérképezés, a szerverterhelés és a feltérképezési költségkeret pazarlása:
„És mindez alapvetően azt jelenti, hogy találunk, vagy potenciálisan végtelen számú oldalt találunk a webhelyén. És tudom, hogy egyesek úgy gondolják, húha, ha végtelen számú oldalam lenne a Google-ban, akkor én lennék a király.
De nem jó, ha végtelen számú oldalt ismer a Google, mert a Google megpróbálja feltérképezni az összes oldalt. És el tudod képzelni, mi történik, ha azt látjuk, nem tudom, hogy 100 millió új oldal Martin Splitből leáll, és megpróbálja feltérképezni azokat. Szóval ez egy olyan dolog, ahol hirtelen megkérdőjeleződik a feltérképezési költségkeret, és a szerver terhelése és a szervere olyan, mint, istenem.”
Ez az oka annak, hogy Mueller és Splitt a robots.txt használatát javasolja a keresőmező oldalak feltérképezésének megakadályozására. Pontosabban azt mondják, hogy a lehető legtágabb és általánosabb robots.txt szabályt kell használni, amely képes megfogni az automatikusan generált keresőmező oldalak összes változatát.
Noindex irányelv
Mueller és Splitt megemlíti a robots noindex direktíva használatát, de azt mondják, hogy a robots.txt egyszerűbb és legtisztább módja a keresőmező-weboldalak kezelésének.
