Indeksiranje web stranice: Zašto web stranica nije na Google?

Irena Omazić

indeksiranje web stranice

Zašto moje web stranice nema na Googleu i što trebam učiniti da se to promijeni?

Ovo pitanje sam više puta čula od klijenata koji su se trudili da kreiraju dobar sadržaj, imaju lijep dizajn web stranica, ali to su znali samo oni ne i Google.

Uzrok zbog kojeg weba nema na Google može biti indeksiranje web stranice.

To je onaj detalj koji promakne klijentima jer je potrebno malo tehničkog znanja da otkrijete problem.

Ovo su tri stvarne priče iz suradnji s klijentima i koraci koje smo poduzeli da se web stranice konačno pojave na tražilici.

U ovom tekstu saznat ćete:

  • kako je wordpress alat blokirao Google da indeksira web stranicu,
  • kako je loša arhitektura web stranice i loša sitemapa davala prioritet drugim sadržajima umjesto najnovijim i kako smo to ispravili
  • zašto potpuno nova web stranica nije na Googleu iako se čini da je sve uredu.

Zašto Google ne indeksira web stranicu i kako to popraviti?

“Pitao sam ChatGPT o mojoj web stranici i odgovorio mi je da nema nikakve informacije o mom webu. Na Googleu nema nikakav trag o tome da moj web postoji.”

Ovo su klijentove riječi. Bio je zbunjen jer čak ni Chat GPT nije znao da njegov web (objavljen 2021. godine) postoji.

Riječ je bila o odlično dizajniranoj web stranici malog brenda sa 5 premium proizvoda koji imaju vrhunski dizajn i odlične fotografije.

Kompletan brending je dobro urađen, web stranica u WordPressu.

Zašto ni Google ni AI nisu znali da web postoji i nisu ga mogli pronaći?

Kada provjeravam vidljivost stranice na Googleu, prva akcija koju poduzimam je ukucati u tražilicu

Site:imedomene

Primjer provjere indeksiranih stranica na jednom webu
Primjer provjere indeksiranih stranica na jednom webu

Na ovaj način provjerim stranice na webu koje Google vidi. Ako je Google indeksirao web stranicu, to znači da je ona vidljiva i umjetnoj inteligenciji.

U slučaju ovog klijenta, rezultat je bio 0.

Sve je bilo prazno.

Druga akcija koju poduzimam je provjera robots.txt fajla kucanjem URL-a u pretraživač.

U ovom fajlu je napisano uputstvo za Google, kako se treba ponašati na web stranici. Ako smo mu rekli nemoj ulaziti na web on će poslušati naredbu. Ali to onda znači da ni Google, a kao posljedicu ni korisnici ne vide što na tom webu ima.

robots file na webu
Primjer robots-txt fajla na webu

Treća akcija koju provjerim je WordPressova mogućnost da “obeshrabrite tražilice” da indeksiraju sadržaj. Ovo radimo dok je web stranica još u uzgradnji, uključujemo zabranu za tražilice dok se ne uvjerimo da web može ići lajv.

Kod klijenta s početka priče sve provjere o indeksiranju bile su ok. Robots txt fajl uredan, Google nije bio blokiran.

Ali web stranica nije bila vidljiva na internetu.

Što je onda bio problem?

Problem je bio age restriction dodatak za wordpress.

Ovo je web stranica brenda koji spada u kategoriju sadržaja za odrasle.

Zbog toga je potrebno imati restrikciju prilikom ulaska na web stranicu, gdje morate potvrditi da ste punoljetni.

Problem nastaje što ovakvi (zakonski obvezni alati) prave veliki problem za SEO.

U nekim slučajevima smanjuju vidljivost sadržaja u nekima je vidljivost potpuno isključena.

Koje je rješenje za indeksiranje web stranice ako imate na webu age restriction?

Napravili smo testiranje s drugim alatom koji ima pop-up umjesto zida koji prekriva kompletnu stranicu.

Vizualno, oba rješenja izgledaju isto. Pozadina je tamna s nekoliko kućica za potvrdu punoljetnosti. Ono što je promijenio novi alat je “propusnost.”

Google je sada vidio sadržaj na stranici iako je postojao pop-up s tamnom pozadinom.

Nakon 2 dana pomak je bio vidljiv.

Google je indeksirao i rangirao stranice s weba, web se konačno pojavio u rezultatima pretraživanja. I posjete na webu su krenule.

Kako crawl budget utječe na indeksiranje stranica na webu?

Klijent mi se požalio da su na web stranici objavili članak, bili su prvi s takvom informacijom, mnoge web stranice su sadržaj preuzele od njih i objavili na svom webu. Na kraju, svi su u Google rezultatima vidljivi osim mog klijenta koji je prvi objavio vijest.

Klijent je bio zabrinut jer su ulagali u on-page SEO, nedavno je web stranica redizajnirana, urađen je rebrending i opet ih nema na Google.

Kada se radi o velikim web stranicama prioritet je tehnički SEO i optimizacija crawl budgeta.

Kada je tehnički SEO važniji od sadržaja na webu?

Svaka web stranica kod Googlea ima određen crawl budget.

Ako je Google došao na web, potrošio budžet na 20 kategorija, 43 potkategorije, 7158 oznaka (tagova) i još gomilu filtera sadržaja, za novi članak koji je važan nije ostalo budžeta.

Njega će indeksirati drugi put.

Ali taj “drugi put” je kasno jer je “prošla baba s kolačima.”

Kome se problemi s crawl budgetom mogu događati?

Svima koji imaju velike web stranice, a to su najčešće web shopovi, news portali.

Što vam je činiti ako se novi sadržaj objavljen na webu ne pojavljuje na Googleu?

Angažirajte SEO eksperta da vam uradi SEO analizu web stranice i onda ga poslušajte i implementirajte preporuke.

Neću vam lagati da sami možete brzinski provjeriti i otkriti u čemu je problem, jer vjerojatno ne možete.

Kako smo riješili crawl budžet, a s njim i bolje indeksiranje web stranice?

Pregledali smo web, pronašli stranice koje nepotrebno troše crawl budget i uklonili ono što nema svrhu:

  • obrisali kategorije i potkategorije koje se ne osvježavaju redovito i uradili redirekcije
  • obrisali više verzija istog pojma (računovođa, računovođe, računovodstvo) koji se koristi kao oznake (tagovi)
  • obrisali generičke riječi koje su se koristile kao tagovi (tunel, ribe)
  • paginaciju svih kategorija, potkategorija, tagova stavili na noindex – follow.

Ovo u praksi znači da Google neće na 45. stranici kategorije danas indeksirati članke koji su objavljeni još 2018. godine. Budući da smo stavili follow, on zna da se stari članci nalaze na tom mjestu.

Kako izgleda ecommerce web koji nema podešen no index - no follow tagove
Kako izgleda ecommerce web koji nema podešen no index – no follow tagove

Zašto nova web stranica nije na Googleu?

“Tražio sam na Googleu i Bingu, nas nema nigdje. Kako to?”

Ovo su riječi klijenta nakon lansiranja nove web stranice i nove domene koja postoji od jučer.

Razlog zašto web stranice nema na tražilici je što Google još ne zna web postoji. U ovakvim situacijama manualno se radi zahtjev za indeksiranje u Google Search Console.

Google indeksira web stranicu u roku od nekoliko minuta, ali to je tek početak.

Rangiranje, treći korak u ovom procesu, još nije završeno. To ćemo pričekati.

To što je Google indeksirao našu web stranicu još uvijek ne znači da nam je dao poziciju u rezultatima.

Kako ovo funkcionira? Postoji red:

  • otkrivanja sadržaja (discovery)
  • crawlanja (razumijevanja o čemu se radi)
  • indeksiranja web stranice koja se sada nalazi u Googleovoj biblioteci URL-ova
  • rangiranja (zauzimanje pozicije na Googleu) što ovisi i o kvaliteti web stranice i sadržaja na njoj.

Kada se nova web stranica pojavila na Googleu?

Trebalo je sačekati jedan dan da se sadržaji pojave u rezultatima pretraživanja i to uglavnom za brend ključne riječi (one koje uključuju ime kompanije). Za one ključne riječi koje želi i konkurencija trebalo je malo više borbe.

Kako provjeriti je li web stranica indeksirana na Googleu?

Jednostavan način da brzo provjerite je li web stranica indeksirana je da u tražilicu upišete site:imedomene i provjerite rezultat.

Ako nema rezultata, znači da stranica nije indeksirana. Google u svojoj biblioteci URL-ova nema sadržaj koji se odnosi na web koji vi tražite.

Zašto web stranice nema na Google tražilici
Prikaz na Googleu kada web stranice nema u Googleovoj biblioteci URL-ova

Google indeksira stranicu ako ju je posjetio Googleov bot za indeksiranje (“Googlebot”), analizirao sadržaj i značenje te pohranio u Googleov indeks. Samo stranice koje su indeksirane mogu se prikazati u rezultatima Google pretraživanja.”

Najpouzdaniji način kako provjeriti indeksiranje web stranice je Google Search Console.

Prikaz indeksiranih stranica u Google Search Console
Prikaz indeksiranih stranica u Google Search Console

Kada otvorite alat odmah je vidljivo koliko stranica je indeksirano.

Kako manualno zatražiti indeksiranje web stranice u Google Search Console?

Indeksiranje jedne web stranice ili čitavog sajta može se zahtijevati ručno.

U Google Search Console unesemo link i kliknemo “ZATRAŽITE INDEKSIRANJE.”

Primjer kako zatražiti manualno indeksiranje URL-a u Google Search Console
Primjer kako zatražiti manualno indeksiranje URL-a u Google Search Console

Za nekoliko minuta stranica bi trebala biti indeksirana.

Kada Google indeksira web stranicu?

Za kraj jedna velike istina koja iznenadi veliki broj mojih klijenata.

Google na vašu web stranicu ne dolazi kada vi objavite novi tekst. On dolazi kad ima “zakazan termin” posjete vašem webu.

Zašto je takva procedura? Googleovi serveri troše ogromne resursa, da bi ekonomično trošio resurse, ima svoj način rada.

Ako vaše web stranice nema na Googleu, javite se da uradimo SEO analizu i otklonimo probleme koji vas sprječavaju da se pojavite u rezultatima pretrage.

BLOG

Prethodni članci

Iskustvo stečeno pisanjem preko 500 tekstova za klijente dokumentiram u ovom blogu.