Na základe čoho si Google všíma váš web?

Čo v článku nájdete:

• Ako to celé funguje?
• Google, crawling a najnovšia úprava dokumentácie
• Rýchla odozva servera
• Skonsolidujte duplicitný obsah a blokujte prehľadávanie adries URL pomocou súboru robots.txt
• Aký je vplyv populárnych URL na internete?
• Tipy na záver
• FAQ
• Čo je to crawling webovej stránky?
• Čo je to indexácia webovej stránky?
• Čo je chyba servera 5xx?
• Čo je Google Search Console?
• Čo je to súbor robot.txt?
• Čo je xml mapa stránky?
• Zdroje a inšpirácia

Zamysleli ste sa niekedy nad tým, na základe čoho uprednostní Google váš web pred webom konkurencie? Asi je známe, že Google prechádza každý jeden web a na základe toho sa rozhoduje ako s ním “naloží”. Či ho posunie vyššie vo vyhľadávaní alebo či pozícia webu vo vyhľadávaní poklesne. Takisto je známe, že Google sa na základe určitých faktorov rozhoduje, či nejaké informácie z vášho webu použije do svojich výsledkov AI odpovedí.

Ako to celé funguje?

Investovali ste do nového webu, ale zatiaľ nemáte návštevnosť. Redizajnovali ste web a zrazu, napriek očakávaniam, zaznamenáte pokles návštevnosti. Tento problém má veľmi veľa začínajúcich biznisov, ktoré investovali veľké peniaze do vývoja, majú web a – tam to skončilo. Má to spoločný menovateľ: Technické SEO.

Predtým ako sa vaša stránka objaví vo výsledkoch vyhľadávania alebo AI, tak je “crawlovaná”, čiže prehľadávaná Googlom. To si jednoducho môžete predstaviť tak, že nejaký robot navštívi vašu stránku, zozbiera z nej obsah a spracuje ho. Takže ako prvé – musíte umožniť týmto robotom navštíviť svoj web.

Nezabudnite ale: Len pre to, že je vaša stránka prehľadaná automaticky, nie je automaticky indexovaná.

Tu si prečítajte o rozdieloch – viac o crawlingu a tu o indexácii webovej stránky

Google, crawling a najnovšia úprava dokumentácie

Google má dokumentáciu, kde sú zverejnené informácie o tom, čo je crawling a ako prechádza váš web. Nájdete tu informácie o základných pojmoch, o tom, že Google má veľa crawlerov (najznámejší je Googlebot), že je fajn, keď Google často prechádza váš web, že crawler nejde za platené časti vašej stránky (alebo tie, kde je potrebné prihlásenie) a ďalšie. K základom si najlepšie prečítate priamo v časti “Things to know about Google’s web crawling”.

Pre účely tohto článku nás však zaujíma veta, ktorá bola do tejto dokumentácie pridaná len nedávno:

“Každá stránka začína s rovnakým predvoleným limitom kapacity prehľadávania. Ak existuje dopyt po väčšom prehľadávaní a stránka zostane v poriadku, systémy spoločnosti Google tento limit časom automaticky upravia.”

Dalo by sa teda napísať, že na začiatku sú si všetky webové stránky rovné. Bez ohľadu na doménu či dizajn vášho webu. Čo ale prijme Google k tomu, aby sa venoval viac práve vášmu webu? Sú to najmä tieto tri oblasti:

Rýchla odozva servera

Ak webstránka reaguje konzistentne a časy jej odozvy sú stabilné alebo sa zlepšujú, kapacita prehľadávania sa zvýši. Ak sa stránka spomalí (napríklad v dôsledku chýb servera 5xx) limit sa zníži a Google bude prehľadávať menej. A samozrejme platí, čím viac Google prehľadáva, tak tým je to pre váš web lepšie. Ako Google prehľadáva váš web si viete skontrolovať v Google Search Console, v časti Settings – Crawl Stats – Open report:

Z grafu je vidieť ako sa zväčší počet požiadavok (modrou), keď klesne doba odozvy (oranžovou)

Čiže cieľom vášho technického SEO by mal byť čo najkratší čas potrebný k načítaniu jednej url adresy. A toto by nemala byť jednorazová “akcia”, ale stav, ktorý si web dokáže udržať.

Skonsolidujte duplicitný obsah a blokujte prehľadávanie adries URL pomocou súboru robots.txt

Odstráňte duplicitný obsah tak, aby sa mohlo prehľadávanie zamerať na jedinečný obsah, a nie na jedinečné adresy URL. Takisto – niektoré stránky môžu byť pre používateľov dôležité, ale nechcete, aby sa zobrazovali v Google. Ak ich nemôžete zlúčiť, zablokujte tieto nedôležité stránky pomocou súboru robots.txt . Blokovanie adries URL pomocou súboru robots.txt zabráni Googlu v ich prehľadávaní.

Aký je vplyv populárnych URL na internete?

Vo všeobecnosti podľa Google platí, že URL, ktoré sú viac populárne, majú tendenciu byť častejšie prehľadávané. Môže sa to týkať populárnych URL adries vzhľadom na trendovosť – či už to boli dávnejšie stránky ohľadom bitcoinov alebo weby týkajúce sa umelej inteligencie v súčasnosti. Je asi logické, že novovzniknutý portál umelej inteligencie bude Google zaujímať viac ako trebárs novovzniknutý eshop so záhradným nábytkom. Sekundárnym činiteľom však určite sú odkazy. Existuje určitá korelácia medzi počtom externých odkazov a frekvenciou návštev Googlebota.

“Jestli na něco odkazuje hodně dalších webů, asi bych o tom jako Google chtěl vědět dřív než o zbytku internetu.” (Z. Dvořák, linki.cz)

A z toho vyplýva aj logický záver – aj keď spätné odkazy pre vyhľadávače a odpovede AI nemajú priamy vplyv, nepriamo majú určite veľký význam. Do žiadnej vygenerovanej odpovede sa však nedostanete skôr ako vás Google prejde a zaindexuje. A o tom odkazy spolurozhodujú.

Tipy na záver

Pravidelné aktualizácie vášho webu novým obsahom môže pomôcť botom vyhľadávacích nástrojov nájsť a prehľadávať nové stránky. Tiež to naznačuje, že webová lokalita je aktívna a relevantná, čo môže zlepšiť jej celkovú viditeľnosť vo výsledkoch vyhľadávania.

Tipy na optimalizáciu prehľadávania

• Vytvorte xml mapu stránky – mapa stránky je súbor, ktorý obsahuje zoznam všetkých stránok na vašej webovej lokalite, čo uľahčuje prehľadávačom nájsť (a indexovať) vaše stránky.
• Optimalizujte štruktúru vašej webovej lokality – uistite sa, že štruktúra vašej webovej lokality je dobre organizovaná a dá sa v nej ľahko navigovať.
• Využívajte interné prepojenia  a spätné odkazy– prepojenie medzi jednotlivými stránkami na vašej webovej lokalite uľahčuje prehľadávačom prehľadávanie; čím viac interných odkazov lokalita má, tým viac ju vyhľadávací nástroj vyhodnotí ako dôležitú a relevantnú. A čím viac relevantných externých odkazov váš web má, tak tým viac dáva vedieť o sebe Google
• Monitorujte rýchlosť prehľadávania – využite službu Google Search Console na monitorovanie rýchlosti prehľadávania a odozvy vášho servera

Ak si teda dáte toľko námahy, že si vytvoríte alebo redizajnujete nový web, tak nezabudnite ani na technické SEO špecifiká. Jedna vec je pekný dizajn podľa vašich predstáv. No ten vám bude nanič, keď vás Google nenájde. Zvyšujte teda rýchlosť odozvy, ponúkajte Google obsah, ktorý nie je balast a web pravidelne monitorujte.

Ak si neviete rady, kde začať, tak sa nám ozvite 🙂 Pozrieme sa na váš web spolu a navrhneme vám optimálny postup.

FAQ

Čo je to crawling webovej stránky?

Crawling je proces, pri ktorom boty (prehľadávače) vyhľadávacích nástrojov, nazývané crawlery, prehľadávajú stránky vašej webovej lokality, aby určili ich obsah a relevantnosť. Zjednodušenie povedané, crawling je istá forma analýzy celého obsahu/kódu webovej stránky.

Čo je to indexácia webovej stránky?

Index je databáza vyhľadávača, ktorá obsahuje údaje o všetkých webových lokalitách, ktoré prehľadávač našiel. Ak webová lokalita nie je zahrnutá v indexe, nezobrazí sa v SERP (Search Engine Result Page).

Čo je chyba servera 5xx?

Chyba servera 5xx je stavový kód, ktorý znamená, že webový server nedokázal spracovať platnú požiadavku od používateľa. Najčastejšia chyba je stavový kód 500, známy ako “500 Internal Server Error” (vnútorná chyba servera), je štandardný HTTP stavový kód, ktorý signalizuje, že na serveri sa vyskytla neočakávaná chyba a nebol schopný dokončiť spracovanie požiadavky. 

Čo je Google Search Console?

GSC je bezplatný nástroj spoločnosti Google. Pomocou GSC môžete sledovať výkonnosť svojej webovej lokality, odosielať Googlu mapy stránok, zistiť, či na vašej lokalite nie sú nastavené manuálne sankcie, a skontrolovať, či boli indexované všetky vaše stránky.

Čo je to súbor robot.txt?

Robot.txt je textový súbor, ktorý webová lokalita používa na komunikáciu s webovými robotmi (najčastejšie robotmi vyhľadávačov) o tom, ako majú spracovať jednotlivé stránky vašej webovej lokality. V tomto súbore môžete nastaviť určité stránky ako zakázané pre bota a skenovať len najužitočnejší obsah.

Čo je xml mapa stránky?

XML mapa stránok (alebo v angličtine XML sitemap) je súbor, ktorý obsahuje zoznam dôležitých stránok webovej lokality, vďaka čomu ich vyhľadávače dokážu nájsť a všetky prehľadať. Pomáha vyhľadávačom pochopiť štruktúru vašej webovej lokality a môže pomôcť urýchliť odhaľovanie obsahu.

Zdroje a inšpirácia

• Linki.cz (Kdy sa Google rozhodne, že bude váš web prochádzet víc?)
• https://developers.google.com/crawling/docs/about-crawling#googles-crawling-has-grown-over-time-as-pages-have-become-more-complex
• https://developers.google.com/crawling/docs/crawl-budget