Log File Analysis eli lokitiedostojen analysointi tarkoittaa palvelimen access log -tiedostojen tutkimista, josta selviää kuka vieraili sivustolla, milloin ja mitä sivuja pyydettiin. SEO-näkökulmasta erityisen kiinnostavaa on hakurobottien käyttäytyminen.
Mitä lokitiedostoista selviää?
Palvelimen lokitiedostot sisältävät arvokasta tietoa:
- Hakurobottien vierailut — millä sivuilla Googlebot käy ja kuinka usein
- Crawl-budjetin käyttö — kuinka monta sivua hakurobotit indeksoivat päivittäin
- HTTP-tilakoodit — mitkä sivut palauttavat virheitä (404, 500)
- Vasteajat — kuinka nopeasti palvelin vastaa pyyntöihin
- Crawl-tiheys — kuinka usein hakurobotit palaavat tietyille sivuille
- Orposivut — sivut, joilla hakurobotit käyvät mutta joihin ei linkitetä
Miksi lokianalyysi on tärkeää?
Google Search Console ja analytiikkatyökalut kertovat vain osan totuudesta. Lokitiedostot paljastavat asioita, joita muut työkalut eivät näytä:
- Googlebot vs. käyttäjät — näet eron hakurobottien ja oikeiden kävijöiden välillä
- Indeksoinnin aukot — sivut, joilla hakurobotit eivät käy lainkaan
- Tuhlattuja resursseja — sivut, joihin hakurobotit käyttävät turhaan crawl-budjettia
- Palvelinongelmia — ajoittaiset virheet, jotka eivät näy muissa työkaluissa
Lokianalyysin työkalut
Lokitiedostojen analysointiin on sekä ilmaisia että maksullisia työkaluja:
- Screaming Frog Log File Analyzer — tehokas ja käyttäjäystävällinen
- Botify — enterprise-tason crawl- ja lokianalyysi
- JetOctopus — edullisempi vaihtoehto suurten sivustojen analysointiin
- Excel/Google Sheets — yksinkertainen analysointi suodattimilla
- ELK Stack — tekninen ratkaisu (Elasticsearch, Logstash, Kibana)
Yhteenveto
Log File Analysis on edistynyt teknisen SEO:n työkalu, joka paljastaa hakurobottien todellisen käyttäytymisen sivustolla. Pienelle yritykselle lokianalyysi tulee ajankohtaiseksi yleensä vasta, kun sivusto on kasvanut suureksi tai kun epäillään indeksointiongelmia. Pienemmille sivustoille Google Search Console tarjoaa riittävän näkymän hakurobotin toimintaan.