Se hvilke AI-crawlere som når sidene dine
Log Analyzer gjør tilgangslogger til dokumentasjon på crawleraktivitet: hvilke boter som ba om sidene, når de kom og hvordan serveren svarte. Et besøk beviser ikke at siden ble sitert.
Finn sidene crawlerne ikke får lest
Se forespurte URL-er, statuskoder og besøksfrekvens i sammenheng. En mye besøkt side som svarer med feil, trenger et annet tiltak enn en nyttig side som aldri hentes. Sammenlign loggene med nettkartet og interne lenker før du endrer tilgangsreglene.
Hva loggene faktisk dokumenterer
Tilgangslogger viser forespørsler, ikke svarene en AI-assistent senere lager. User-agent-navn kan dessuten forfalskes. Bruk derfor botnavnet som et klassifiseringssignal, ikke som et identitetsbevis. Kombiner loggene med observerte siteringer og henvisningstrafikk når du vurderer effekt.
Ofte stilte spørsmål
Hvilke loggformater støtter Logganalyse?
Apache, Nginx, Cloudflare Enterprise Logs og AWS CloudFront JSON oppdages automatisk ved opplasting. Ingen schema-mapping, ingen SQL og ingen manuell konfigurasjon.
Hvilke AI-crawlere identifiserer den?
Logganalyse gjenkjenner 200+ navngitte crawlere inkludert GPTBot (OpenAI), ClaudeBot (Anthropic), PerplexityBot, Google-Extended, Googlebot, Bytespider, CCBot og mange flere.
Hva er forskjellen mellom Logganalyse og Bot Tracker?
Logganalyse parser opplastede serverlogger og produserer en historisk rapport. Bot Tracker klassifiserer crawlere i sanntid som siteringsverdig, nøytral eller fiendtlig, og kobler crawl-aktivitet til faktiske siteringshendelser.
Hvor langt tilbake går det historiske arkivet?
Logganalyse lagrer opptil 90 dager med parsede loggdata. Du kan filtrere på bot, URL-sti og datointervall, og eksportere alt som CSV.
Hva er trusselgjenkjenning?
Trusselgjenkjenning flagger automatisk crawlere med uvanlig mange forespørsler, brudd på robots.txt eller skrapemønstre. Hver trussel tildeles en alvorlighetsgrad med anbefalt robots.txt-oppføring.
Kan jeg generere en robots.txt fra resultatene?
Ja. Logganalyse inkluderer en ett-klikks AI-bevisst robots.txt-generator basert på crawlerne observert i loggene dine.