Vodiči

Analiza Server Logova za Praćenje Botova Pretraživača

  • 17 min čitanja
  • Hostragons tim
Analiza Server Logova za Praćenje Botova Pretraživača

Analizom server logova (dnevnika) praćenje botova pretraživača predstavlja najpouzdaniji način da vidite koje URL-ove, koliko često, s kojim statusnim kodovima i koliko resursa posjećuju Googlebot, Bingbot i drugi preglednici na vašoj web stranici. Dok SEO alati daju procjene, server logovi izravno prikazuju stvarne zahtjeve koje je vaš server zabilježio; na taj način možete jasno mjeriti rasipanje budžeta za indeksiranje, 404/500 greške, lance preusmjeravanja, nepotrebne URL-ove s parametrima i koliko su značajne stranice dovoljno posjećene od strane botova.

Tehnički SEO radovi često se fokusiraju na vidljive aspekte kao što su optimizacija unutar stranice, brzina, strukturirani podaci i backlinkovi. Međutim, da biste razumjeli kako pretraživač vidi vašu stranicu, potrebno je istražiti ponašanje botova. Najčistiji i najpouzdaniji izvor informacija o ponašanju botova su pristupni logovi, poznati kao access log. Analiza logova igra ključnu ulogu u rješavanju problema indeksiranja, posebno za velike e-trgovine, novinske portale, SaaS projekte, višejezične web stranice i blogove koji često proizvode sadržaj.

U ovom vodiču korak po korak ćemo obraditi praktičan i primjenjiv pristup analizi server logova za blog Hostragons, uključujući gdje se logovi nalaze, koja polja treba čitati, kako razlikovati stvarne botove od lažnih, koje SEO metrike pratiti i kako pretvoriti rezultate analize u akciju. Ako vam je potrebna pouzdana hosting infrastruktura za redovnu analizu logova na vašoj stranici, možete razmotriti opcije Hostragons web hosting i Hostragons VPS Server za projekte s visokom posjećenošću.

Što su Server Logovi i Zašto su Važni za SEO?

Server log je dnevnički zapis u kojem su zabilježeni svi zahtjevi koji dolaze na vaš web server. Kada korisnik otvori vašu početnu stranicu, kada Googlebot pretražuje stranicu kategorije ili kada sigurnosni preglednik šalje zahtjev vašoj stranici, ti događaji se bilježe u logu. Obično sadrži informacije kao što su datum, vrijeme, IP adresa, tražena URL adresa, HTTP metoda, statusni kod, veličina odgovora, user-agent i ponekad vrijeme odgovora.

Sa SEO stanovišta, logovi su važni jer izravno prikazuju kako pretraživači indeksiraju vašu stranicu. Google Search Console vam daje statistike indeksiranja; međutim, ne pruža uvijek detaljne informacije o svakom zahtjevu na razini URL-a, svim botovima i trenutnim greškama na vašem serveru. Analizom logova možete vidjeti, na primjer, da je Googlebot u posljednjih 7 dana napravio 12.400 zahtjeva, od kojih je 18% otišlo na 301 preusmjeravanje, 6% na 404 grešku, 2% na 500 grešku, a samo 9% važnih stranica je bilo indeksirano.

Ovi podaci su posebno vrijedni za upravljanje budžetom za indeksiranje. Budžet za indeksiranje može se smatrati količinom URL-ova koje botovi pretraživača mogu indeksirati na vašoj stranici u određenom vremenskom razdoblju. Ako postoji previše nepotrebnih filtara, paginacija, rezultata pretraživanja, URL-ova s parametrima ili pogrešnih preusmjeravanja, botovi će provesti manje vremena na vašim vrijednim stranicama. Logovi otkrivaju ovu rasipanje s dokazima.

Koja Pitanja Se Postavljaju Kada Praćete Botove Pretraživača?

Uspješna analiza logova nije samo otvaranje datoteke i čitanje redaka. Prvo je potrebno postaviti prava pitanja. Tehnički SEO timovi obično traže odgovore na sljedeća pitanja:

  • Koje URL grupe Googlebot najviše pretražuje?
  • Da li su važne stranice dovoljno posjećene?
  • Koliko zahtjeva dobiva status 200, 301, 302, 404, 410 ili 5xx?
  • Da li botovi nastavljaju slati zahtjeve na područja koja su blokirana robots.txt?
  • Da li URL-ovi s parametrima, duplicirani ili s niskom vrijednošću troše budžet za indeksiranje?
  • Postoji li razlika u ponašanju između mobilnog i desktop Googlebota?
  • Da li vrijeme odgovora servera usporava indeksiranje botova?
  • Da li lažni botovi troše resurse ponašajući se kao Googlebot?

Svako od ovih pitanja može se izravno pretvoriti u akciju. Na primjer, ako primijetite da Googlebot pretražuje veliki broj starih URL-ova s 404 statusom, možete preusmjeriti te URL-ove na odgovarajuću kategoriju s 301 preusmjeravanjem ili, ako su trajno uklonjeni, koristiti 410 statusni kod. Ako 30% botova odlazi na interne rezultate pretraživanja, možda ćete morati ponovno osmisliti robots.txt, canonical, noindex ili upravljanje URL parametrima.

Gdje se Nalaze Log Datoteke?

Lokacija log datoteka ovisi o vrsti hostinga, kontrolnoj ploči i web serveru koji koristite. Za web stranice koje koriste dijeljeni hosting, pristupni zapisi obično se nalaze u cPanelu, Plesku ili odjeljcima statistike i raw access logs u hosting panelu. Za projekte koji koriste VPS ili dedicirane servere, logovi se obično pristupaju preko SSH.

Uobičajene Lokacije Apache i Nginx Logova

Na Linux serverima, uobičajena putanja za Apache pristupni log je /var/log/apache2/access.log ili /var/log/httpd/access_log. Na serverima koji koriste Nginx, uobičajena datoteka je /var/log/nginx/access.log. U konfiguracijama virtualnog hostinga specifičnih za domenu, može se zadržati odvojeni log za svaku stranicu, što povećava točnost analize u višestrukim instalacijama.

Primjer jednog log zapisa može sadržavati sljedeće informacije: 66.249.66.1 - - [12/Mar/2026:10:15:22 +0300] GET /blog/tehnicki-seo HTTP/2.0 200 18432 Googlebot/2.1. Iz ovog zapisa možete pročitati IP adresu, vrijeme zahtjeva, URL, statusni kod, veličinu odgovora i user-agent informaciju. Ako vaša log format uključuje vrijeme odgovora, to će vam dati snažniji skup podataka za analizu performansi.

Preuzimanje Logova iz Hosting Panela

Za korisnike s ograničenim tehničkim znanjem, preuzimanje logova iz hosting panela je najpraktičnija metoda. Možete potražiti odjeljke kao što su access logs, raw logs, visitors ili web statistics u panelu. Na velikim stranicama dnevne log datoteke mogu sadržavati stotine tisuća redaka; stoga je učinkovitije preuzeti datoteke u komprimiranim formatima i analizirati ih. Za redovite pristupe, sigurnosno kopiranje i praćenje performansi, rješenja koja su jednostavna za upravljanje kao što su Hostragons cPanel hosting mogu ubrzati vaš rad.

Važna Polja za SEO u Log Redovima

Svaki log red nije iste vrijednosti. Za SEO, potrebno je fokusirati se na određena polja. IP adresa se koristi za verifikaciju da li je bot stvaran. Datum i vrijeme omogućuju vam da mjerite gustoću indeksiranja na dnevnoj i vremenskoj bazi. HTTP metoda obično bi trebala biti GET; neuobičajeni POST zahtjevi mogu se pregledati iz sigurnosnih razloga. Tražena URL adresa pokazuje koja je stranica pretražena. Statusni kod izražava dostupnost stranice. User-agent pomaže u razumijevanju identiteta bota koji šalje zahtjev. Ako postoji polje za vrijeme odgovora ili time taken, to je vrlo vrijedno za analizu iskustva bota i opterećenja servera.

Na primjer, pretpostavimo da je u posljednjih 30 dana bilo 50.000 zahtjeva od Googlebota. Od tih zahtjeva, 38.000 je bilo 200, 7.500 je bilo 301, 2.000 je bilo 404, 1.200 je bilo 304, 800 je bilo 5xx i 500 je bilo 302, problem je očigledan: postotak preusmjeravanja i grešaka je više od 20%. Tehnički SEO cilj je približiti 5xx greške nuli, smanjiti 404 na smisleni nivo i smanjiti nepotrebna preusmjeravanja.

Kako Razlikovati Stvarni Googlebot od Lažnog Bota?

User-agent sam po sebi nije pouzdan. Zlonamjerni botovi se mogu pretvarati da su Googlebot. Stoga, kako biste potvrdili stvarne botove pretraživača, potrebno je provesti obrnutu DNS i naprednu DNS provjeru. Metoda koju preporučuje Google je da se IP adresa prevede u naziv hosta putem reverse DNS-a, zatim provjerite završava li naziv hosta na googlebot.com ili google.com i da li se taj naziv hosta ponovo razrješava na istu IP adresu.

Primjer postupka je sljedeći: Uzmite IP adresu koja dolazi s user-agent informacijom Googlebota iz loga. Na terminalu izvršite naredbu host 66.249.66.1 ili nslookup 66.249.66.1 za obrnutu DNS provjeru. Ako je dobiveno ime domene nešto poput crawl-66-249-66-1.googlebot.com, to je pouzdana Google domena, a zatim pređite na drugi korak. Ponovo razrijesite ovo ime domene na IP. Ako se rezultat podudara s prvom IP adresom, postoji velika vjerojatnost da je bot stvaran. Ako se ne podudara ili ako se dobije neodgovarajuća domena, treba ga smatrati lažnim botom.

Ova provjera je posebno važna za razlikovanje botova koji troše resurse. Lažni Googlebot može trošiti resurse servera, skenirati sigurnosne rupe ili imati namjeru kopirati sadržaj. Kada uočite takav promet, mogu se primijeniti WAF, rate limit, blokiranje IP adresa ili pravila vatrozida. Za HTTPS i sigurnu konfiguraciju veze možete pogledati stranicu Hostragons SSL Sertifikati.

Alati za Analizu Logova

Ne postoji samo jedan pravi alat za analizu logova. Različite metode mogu se koristiti ovisno o veličini stranice, iskustvu tehničkog tima i proračunu. Za male stranice, Excel, Google Sheets ili jednostavni filtri naredbenog retka mogu biti dovoljni. Na srednje velikim stranicama, Screaming Frog Log File Analyser, GoAccess ili Python skripte su učinkovitije. U korporativnim postavkama mogu se koristiti Elasticsearch, Logstash, Kibana, BigQuery ili SIEM rješenja.

Alati za Analizu Logova
MetodaNajbolja UpotrebaPrednostOgraničenje
Excel ili SheetsMali blogovi, niska posjećenostLako se uči, omogućava brzo filtriranjeUsporava kod velikih datoteka i nailazi na ograničenje broja redaka
Naredbeni redakTehnički korisnici, VPS serveriBrzo, besplatno, pogodno za automatizacijuZahtijeva znanje Linux komandi
SEO alati za analizu logovaSrednje i velike straniceBot, URL i izvještaji o statusnim kodovima dolaze unaprijedMože imati trošak licence
ELK ili BigQueryKorporativne i visoko posjećene straniceU stvarnom vremenu, skalabilno i detaljnoInstalacija i održavanje zahtijevaju stručnost

Za praktičan početak, dovoljno je preuzeti logove za posljednjih 7 ili 14 dana i filtrirati samo zahtjeve stvarnog Googlebota, Bingbota, YandexBota i drugih važnih bot user-agent-a. Zatim možete stvoriti pivot tablice prema URL-u, statusnom kodu i datumu. Cilj nije izgraditi savršen skladište podataka u prvoj analizi, već brzo uočiti najveće SEO gubitke.

Korak po Korak Analiza Server Logova

1. Odredite Cilj Analize

Prvo razjasnite što želite saznati. Da li se novi objavljeni sadržaji ne indeksiraju? Da li se stranice kategorija ne pretražuju dovoljno? Utječu li greške servera na organsku vidljivost? Ako je vaš cilj jasan, signali koje ćete tražiti u log datoteci također će biti jasni. Na primjer, za problem indeksiranja, provjerava se koliko su važni URL-ovi indeksirani od strane Googlebota u posljednjih nekoliko dana; za problem performansi, ispituju se 5xx kodovi i vremena odgovora.

2. Odaberite Pravi Vremenski Interval

Veoma kratki intervali mogu biti obmanjujući; predugi intervali nepotrebno povećavaju veličinu datoteke. Za male i srednje stranice, interval od 14 do 30 dana je dobar početak. Na brzim vijestima kao što su novinske stranice, čak i periodi od 3 do 7 dana mogu biti značajni. Na velikim e-trgovinama, sezonske, promotivne i kategorijske nadogradnje trebaju se dodatno označiti.

3. Filtrirajte Bot Promet

U polju user-agent, izdvojite botove kao što su Googlebot, Googlebot-Image, Googlebot-News, Bingbot, YandexBot, DuckDuckBot, Applebot i druge. Međutim, ne zaboravite provesti verifikaciju stvarnih botova u kritičnim izvještajima. Zbog mobilnog prioritetnog indeksiranja, zahtjeve Googlebota Smartphone također treba pratiti. Ako desktop bot izgleda vrlo aktivno, a mobilni bot pasivno, to može ukazivati na probleme s konfiguracijom ili pristupom.

4. Stvorite Grupe URL-ova

Pojedinačna analiza URL-ova može biti neučinkovita na velikim stranicama. Razvrstajte URL-ove u šablone: početna stranica, kategorija, proizvod, blog, oznaka, filtriranje, pretraživanje, paginacija, vizualni, API, statička datoteka itd. Tako možete vidjeti koje dijelove stranice botovi najviše pretražuju. Na primjer, ako 42% zahtjeva Googlebota na e-trgovini odlazi na URL-ove s filtrima, a samo 18% na stranice proizvoda, to može ukazivati na problem s prioritetima.

5. Procijenite Statusne Kodove

Statusni kodovi su jedan od glavnih indikatora u analizi SEO logova. Kod 200 označava uspješan pristup, 301 stalno preusmjeravanje, 302 privremeno preusmjeravanje, 304 nema promjene, 404 nije pronađeno, 410 trajno uklonjeno, 429 previše zahtjeva i 5xx greške servera. Cilj je da važne stranice što je više moguće izravno daju 200, a da botovi ne gube vrijeme na greške ili nepotrebne lance preusmjeravanja.

6. Mjerite Vrijeme Odgovora i Opterećenje Servera

Ako vaš log format uključuje vrijeme odgovora, pogledajte prosječne i 95. percentilne vrijednosti za zahtjeve botova. Prosječno vrijeme od 180 ms može izgledati dobro; međutim, ako 95. percentilna vrijednost iznosi 2.800 ms, to može značiti da određeni tipovi URL-ova usporavaju botove. Stranice koje sadrže filtrirane kategorije, pretraživanje na stranici, dinamičke izvještaje i teške upite na bazi podataka trebaju biti pažljivo pregledane. Ako imate problema s performansama, razmotrite jače resurse kao Hostragons Cloud Server.

Najvažniji Nalazi Analize Logova s SEO Stanovišta

Rasipanje Budžeta za Indeksiranje

Rasipanje budžeta za indeksiranje nastaje kada botovi provode previše vremena na URL-ovima koji nisu bitni. URL-ovi s parametrima, filtriranje rezultata, ID-ovi sesija, stranice za ispis, beskonačni arhivi kalendara i rezultati pretraživanja unutar stranice najčešći su uzroci. Ako u analizi logova vidite da ovi URL-ovi čine visok postotak, razmotrite opcije kao što su canonical, robots.txt, noindex, pojednostavljenje parametara i reorganizacija unutarnjih linkova.

Malo Indeksiranje Važnih Stranica

Ponekad problem nije prekomjerno indeksiranje botova, već pretraživanje pogrešnih stranica. Nove stranice proizvoda, landing page-ovi s visokim potencijalom konverzije ili ažurirani vodiči možda nisu dovoljno posjećeni. Razlozi za to mogu biti slaba interna povezanost, neaktualnost sitemap-a, niska brzina stranice ili duboko pozicioniranje URL-a u arhitekturi. U tom slučaju, ažurirajte XML sitemap, dajte interne linkove iz glavnih kategorija i povezanih sadržaja, identificirajte siročad i smanjite dubinu URL-a. Ako ste u fazi planiranja domene i strukture projekta, možete započeti s Upit Domen za usklađeni start.

Lanci Preusmjeravanja

U logovima je uobičajeno vidjeti da botovi preusmjeravaju s /stari-url na /nova-url, a zatim na /novi-url. Ovi lanci smanjuju korisničko iskustvo i učinkovitost botova. Idealna struktura je da stari URL izravno preusmjeri na konačni URL s 301 preusmjeravanjem. U velikim projektima premještanja stranica, stara pravila preusmjeravanja mogu se akumulirati i stvoriti lance. Mjesečna provjera logova rano može uočiti ove lance.

5xx Greške i Fluktuacije u Dostupnosti

Ako botovi pretraživača često vide 500, 502, 503 ili 504 greške na vašoj stranici, mogu smanjiti učestalost indeksiranja. Ova situacija može posebno utjecati na organsku izvedbu tijekom promotivnih razdoblja. U logovima proučite vrijeme, tip URL-a i vrstu bota povezanih s 5xx greškama. Na primjer, ako se 503 greške povećavaju svake noći u 02:00 tijekom sigurnosnog kopiranja, trebate prilagoditi prozore održavanja, planirati resurse ili strategiju predmemorije.

Čitanje Robots.txt, Sitemap-a i Podataka iz Logova Zajedno

Analiza logova je snažna sama po sebi; međutim, kada se čita zajedno s robots.txt, XML sitemap-om i podacima iz Google Search Console, postaje mnogo smislenija. Usporedite da li su URL-ovi koji su u sitemap-u indeksirani od strane bota. Pronađite URL-ove koji nisu u sitemap-u, ali se često indeksiraju. Provjerite da li botovi šalju zahtjeve na područja koja ste blokirali s robots.txt. Ako se blokirani URL-ovi i dalje pojavljuju u rezultatima pretraživanja, robots.txt možda neće biti dovoljan; može biti potrebna strategija noindex ili uklanjanja.

Dobar pristup je svake mjeseca stvoriti tri popisa: važne URL-ove koji su u sitemap-u, a nisu indeksirani, URL-ove koji nisu u sitemap-u, a često se indeksiraju, te zahtjeve bota koji daju greške. Ova tri popisa čine temelj vašeg tehničkog SEO plana.

Koje Metrike Trebaju Biti Uključene u Izvještaj o Analizi Logova?

Za upravljiv izvještaj, umjesto da se preopteretite previše metrikama, odaberite indikatore koji stvaraju akciju. Sljedeće metrike su dovoljan početni set za većinu stranica:

  • Ukupni bot zahtjevi i raspodjela po botovima
  • Omjer Googlebota Smartphone i Desktop
  • Raspodjela statusnih kodova: 200, 3xx, 4xx, 5xx
  • Stopa indeksiranja prema tipu URL-a
  • Najčešće indeksiranih prvih 100 URL-ova
  • Važni URL-ovi koji nikada nisu ili rijetko indeksirani
  • Prosječno i 95. percentilno vrijeme odgovora
  • Najčešći URL-ovi s 404 i 5xx greškama
  • Postotak zahtjeva URL-a s parametrima
  • Popis lažnih botova ili sumnjivih user-agent-a

Izvještaj pripremite u usporednom formatu na tjednoj ili mjesečnoj bazi. Na primjer, ako je u siječnju stopa 5xx iznosila 1,8%, a u veljači se smanjila na 0,2%, možete dokazati učinak poboljšanja infrastrukture. Na isti način, ako su zahtjevi Googlebota za blog sadržajem porasli za 35% nakon nove interne povezanosti, vaša odluka o arhitekturi sadržaja bit će potkrijepljena podacima.

Praktičan Primjer: Scenarij Analize Logova za 30 Dana

Pretpostavimo da se u tehnološkom blogu analizira pristupni log za posljednjih 30 dana. Od ukupno 320.000 zahtjeva, otkriveno je 48.000 zahtjeva od botova pretraživača. Googlebot je imao 39.500 zahtjeva, Bingbot 5.200, a ostali botovi 3.300. U raspodjeli statusnih kodova, stopa odgovora 200 iznosila je 78%, 301 stopa 11%, 404 stopa 7%, 5xx stopa 1,5% i ostali odgovori 2,5%.

Kada se izrade grupe URL-ova, otkriveno je da 28% zahtjeva Googlebota ide na stranice oznaka, 22% na arhive s datumima, 19% na blog postove, 8% na stranice kategorija, dok ostatak ide na vizualne i statičke datoteke. Međutim, organski cilj prometa stranice bio je ažurirati vodiče i grupe kategorija. Kao akcija, stranice oznaka s niskom vrijednošću su postavljene na noindex, unutarnje poveznice na arhivske stranice su smanjene, a ažurirani vodiči su linkani s glavne stranice i povezanih kategorija, a sitemap je pojednostavljen samo na URL-ove koji se žele indeksirati.

U sljedećih 30 dana, omjer zahtjeva Googlebota za blog postove porastao je s 19% na 34%, dok je omjer za stranice kategorija porastao s 8% na 14%. Stopa od 404 pala je s 7% na 2,1% zahvaljujući preusmjeravanjima starih URL-ova. Ovaj primjer pokazuje da analiza logova nije samo tehnički izvještaj, već izravno podržava strategiju organskog rasta.

Česte Greške

Najčešća greška u analizi logova je slijepa vjera u user-agent informacije. Ako se lažni botovi ne uzimaju u obzir, izvještaji mogu biti obmanjujući. Druga greška je ocjenjivanje svih URL-ova istom vrijednošću. Nema iste posljedice kada se malo indeksira stranica s politikom privatnosti i kada se malo indeksira glavna stranica kategorije. Treća greška je donošenje velikih zaključaka iz podataka jednog dana. Ponašanje botova može se mijenjati iz dana u dan; stoga je važno odabrati smislene periode.

Četvrta greška je mišljenje da će robots.txt riješiti svaki problem. Robots.txt može ograničiti indeksiranje; međutim, često nije dovoljno za upravljanje indeksima. Peta greška je neprevođenje nalaza u akciju. Ako nakon analize logova ne donosite odluke o preusmjeravanjima, unutarnjim povezivanju, sitemapu, canonical-u, performansama i sigurnosti, izvještaj će ostati samo pregled datoteka.

Sigurnosni i Privatnosni Aspekti na Koje Treba Obraćati Pažnju

Budući da log datoteke sadrže IP adrese i informacije o zahtjevima, treba ih pažljivo čuvati. Ne bi se smjele dijeliti s neovlaštenim osobama, a datoteke preuzete za analizu ne bi se trebale zadržavati na osobnim računalima duže nego što je potrebno, a ako je moguće, treba primijeniti maskiranje. U korporativnim projektima, vrijeme čuvanja logova treba biti u skladu s propisima o zaštiti podataka i politikama tvrtke. Također, ako se u log datotekama nalaze tokeni, parametri sesije ili osjetljive informacije iz upita, politika zapisivanja na strani aplikacije treba se revidirati.

Na sigurnosnoj strani, logovi su korisni ne samo za SEO već i za otkrivanje napada. Iznenadne porasti pokušaja 404, skeniranja administratorskih panela, neuobičajenih POST zahtjeva ili intenzivnog prometa s određenih IP blokova mogu biti sigurnosni alarm. Stoga je korisno da SEO i timovi za upravljanje sustavom zajedno analiziraju podatke iz logova.

Zaključak: Analiza Logova je Stvarni Sloj Podataka SEO-a

Analizom server logova za praćenje botova pretraživača smanjuje se potreba za prediktivnim odlukama u tehničkom SEO-u i omogućava vidljivost stvarnog ponašanja indeksiranja. Možete mjeriti koje URL-ove pretraživači cijene, koje greške umaraju botove, kada server ima problema i gdje se rasipa budžet za indeksiranje. Redovita analiza je snažna navika koja pomaže održavanju kvalitete indeksiranja i organske vidljivosti, posebno na rastućim stranicama.

Za brzi početak preuzmite svoje access logove za posljednjih 14 dana, filtrirajte stvarne zahtjeve Googlebota, izbacite statusne kodove i grupe URL-ova. Ako vaši nalazi ukazuju na potrebu za performansama, sigurnošću ili resursima, razmatranje poboljšanja infrastrukture može biti dobar korak. Hostragons može ojačati tehničku osnovu vaše stranice s rješenjima za hosting, VPS, cloud servere, domene i SSL; možete primijeniti poboljšanja proizašla iz analize logova u zdravijem okruženju.

Česta Pitanja

Zašto je server log drugačiji od Google Search Console-a za SEO?

Google Search Console pruža sažetke i podatke usmjerene na Google; dok server log pokazuje stvarne zahtjeve dolazne na vaš server na razini URL-a, vremena, IP-a, user-agent-a i statusnog koda. Stoga je analiza logova siroviji, detaljniji i provjerljiv izvor podataka.

Koliko dnevnih podataka je dovoljno za analizu logova?

Za većinu web stranica, 14 do 30 dana podataka iz logova je dobar početak. Za novinske stranice ili projekte koji se često ažuriraju, analiza od 3 do 7 dana može biti značajna. Sezonski promet također treba dodatno istražiti tijekom promotivnih razdoblja.

Kako mogu znati je li Googlebot stvaran?

Nemojte se oslanjati samo na informacije user-agenta. Obavite obrnutu DNS provjeru za IP adresu, potvrdite završava li naziv domene na googlebot.com ili google.com, i ponovo razrijesite tu domenu na istu IP adresu. Ako se podudara, bot je vjerojatno stvaran.

Da li su 404 greške uvijek problem za SEO?

Ne svaka 404 greška je problem; može biti prirodna za uklonjene ili nikada nepostojeće stranice. Međutim, 404 URL-ovi koji dolaze iz važnih internih linkova, dobijaju backlinkove ili se često indeksiraju od strane Googlebota mogu rasipati budžet za indeksiranje. Za te URL-ove treba razmotriti odgovarajuće preusmjeravanje ili strategiju 410.

Koliko često treba provoditi analizu logova?

Za male stranice mjesečna analiza može biti dovoljna. Za velike e-trgovine, novinske i visoko posjećene projekte preporučuje se tjedno pa čak i dnevno praćenje u kritičnim razdobljima. Nakon premještanja stranica, promjene infrastrukture ili velikih ažuriranja sadržaja, analiza logova svakako se treba provesti.

Podijelite ovaj post:

Hostragons tim

Aktualni vodiči našeg stručnog tima za hosting, poslužitelje i domene. Pronađimo zajedno pravo rješenje za vaš projekt.

Kontaktirajte nas