Semalt: Jak společnost Google ví, kdy (a proč) přestat procházet váš web?

Pavouci Google jsou při marketingu webové stránky stejně důležití jako samotná kampaň SEO. Prohledávají weby a indexují obsah ze všech stránek, které může najít. Provádí také opakovanou indexaci na aktualizovaných stránkách na webu. Pravidelně to činí na základě několika faktorů. Zahrnují mimo jiné PageRank, omezení procházení a odkazy nalezené na stránce. Počet procházení pavouků Google webem bude záviset na jednom nebo více z těchto faktorů.
Webové stránky by měly být snadno přístupné návštěvníkům i procházkám Google procházení. To je důvod, proč mít procházení přátelský web je další výhodou něčí SEO kampaně. V opačném případě Google nebude moci získat přístup k obsahu, a tím snížit hodnocení stránek na stránce hodnocení vyhledávače .
Ross Barber, Customer Success Manager ve společnosti Semalt , definuje, že dva z nejdůležitějších indexačních faktorů, na které se společnost Google spoléhá při ovlivňování svého rozhodnutí zpomalit nebo zastavit procházení vašeho webu, jsou doba připojení a stavový kód HTTP. Mezi další patří příkaz disavow, značky „no-follow“ a soubor robots.txt.
Připojte čas a stavové kódy HTTP

Časový faktor připojení se vztahuje k době, kterou robot prohledávání Google potřebuje k dosažení webového serveru a webových stránek. Rychlost společnost Google velmi oceňuje, protože je velmi známkou dobré uživatelské zkušenosti. Pokud webová stránka není optimalizována na rychlost, bude web špatně hodnocen. Pavouci Google se pokusí o přístup na web, a pokud je doba potřebná k vytvoření připojení delší, odcházejí a procházejí jej méně často. Kromě toho, pokud se společnost Google bude snažit indexovat web podle aktuální rychlosti, může to narušit uživatelský dojem, protože by to mohlo výrazně zpomalit jeho server.
Druhým faktorem indexování jsou stavové kódy HTTP, které odkazují na to, jak dobře server reaguje na požadavek na procházení webu. Pokud jsou stavové kódy v rozsahu 5xx, pak Google bere za sebe zastavení nebo zpoždění rychlosti, kterou procházejí aktuální web. Cokoli v rozsahu 5xx je indikátorem možných problémů se serverem a že odpověď na požadavek může být problematická. Vzhledem k riziku, že způsobí další problémy, roboti Google ustoupí a provedou indexaci, když je server dosažitelnější.
Kdy Google obnoví procházení webu?
Google věří v poskytování nejlepších zkušeností uživatelům a řadí stránky, které optimalizují jejich prvky SEO, k těmto cílům vysoko. Pokud však web v současné době vykazuje výše uvedené problémy, přikáže svému robotu Googlebot, aby jej zkusil procházet později. Pokud problémy přetrvávají, ztratí majitel velkou příležitost nechat Google projít jeho obsah a ve výsledcích vyhledávání mu přiřadit zasloužené hodnocení. Kromě těchto problémů bude mít jakékoli známky nevyžádané pošty web ve výsledcích vyhledávání zablokován.

Stejně jako všechny ostatní algoritmy, které Google používá, jsou její pavouky také automatické. Jsou vyvíjeny pro vyhledávání, procházení a indexování obsahu na základě určitých parametrů. Pokud web nevyhovuje určitým doporučeným postupům, nebude indexování probíhat. Existuje mnoho dalších faktorů, ale vždy nezapomeňte věnovat velkou pozornost časům připojení a stavovým kódům HTTP vašeho webu.