Se hvilke AI-crawlere som når sidene dine
Log Analyzer gjør tilgangslogger til dokumentasjon på crawleraktivitet: hvilke boter som ba om sidene, når de kom og hvordan serveren svarte. Et besøk beviser ikke at siden ble sitert.
Drevet av den åpne 3LA AI Bot-databasen.
Identifiser 200+ bots
Sanntids user-agent-matching mot 3LA Bot-databasen. Vit om en forespørsel er GPTBot, ClaudeBot, en gunstig scraper eller en fiendtlig innholdstyv.
URL-nivå-innsikt
Se nøyaktig hvilke sider AI-bots kravler mest. Finn dine "AI-favoritter" og de foreldreløse sidene de ignorerer — så du vet hva du bør publisere mer av.
Sanntid + full historikk
Live-strøm av innkommende bot-trafikk pluss komplett arkiv. Filtrer på bot, URL, datointervall — eksporter alt som CSV.
Trusselgjenkjenning
Høyfrekvent scraping, mistenkelige URL-er, uoppgitte bots — flagges automatisk med alvorlighetsgrad og anbefalte robots.txt-oppføringer.
Skjermbilder
Slik fungerer det
- 01
Koble til loggene
Last opp Apache/Nginx/Cloudflare-logger, eller strøm live via log-forwarder. Alle standardformater støttes.
- 02
Vi parser og klassifiserer
Hver forespørsel matches mot 3LA Bot-databasen. Bots kategoriseres etter formål, trussel-nivå og siteringsadferd.
- 03
Les dashbordet
Topp-bots, topp-URL-er, request-rate over tid, trussel-hendelser — alt synlig i én sanntids-visning med 90 dagers historikk.
- 04
Generer en robots.txt
Ett-klikks eksport av en AI-bevisst robots.txt som ønsker siteringsbots velkommen og blokkerer skraperne du faktisk vil ut.
Hvem bruker det
- SEO-team som måler AI-crawler-dekning av innholdet sitt
- Sikkerhetsteam som fanger aggressive scrapere før de skader serveren
- Innholds-strateger som oppdager hvilke ressurser som tiltrekker AI-siteringer
- Utviklere som bygger AI-bevisste robots.txt og tilgangspolicyer
Ofte stilte spørsmål
Hvilke logg-formater støttes?
Apache Combined, Nginx (default og custom), Cloudflare Enterprise Logs og AWS CloudFront JSON. Send det du har — vi auto-detekterer format ved opplasting.
Hvordan skiller Log Analyzer seg fra Bot Tracker?
Log Analyzer er den rå parse-motoren — den forteller deg hver crawler som traff siden. Bot Tracker legger sanntids-klassifisering, siterings-kjede-lenking og Slack-varsel på toppen. Mange team bruker begge: Log Analyzer til historisk rapportering, Bot Tracker til live-beslutninger.
Beholder dere rå loggdata?
Du kontrollerer retensjon. Standard er 90 dager med parsede request-poster i workspacet ditt. Rå loggfiler slettes etter parsing med mindre du aktiverer utvidet retensjon.
Kan jeg strømme logger live istedenfor å laste opp filer?
Ja. 3LA Log Forwarder er en lettvekts-daemon som strømmer parsede hendelser til workspacet ditt i sanntid. Fungerer på Apache, Nginx og Cloudflare Workers.
Trenger dette PII-rensking først?
Nei. Log Analyzer stripper IP-adresser og query-strings ved parse-tid som standard. Du sender aldri bruker-identifiserende data til oss med mindre du eksplisitt aktiverer det.
De fem AI-modellene som allerede svarer for merkevaren din.
Hver audit kjøres mot ChatGPT, Claude, Gemini, Perplexity og Mistral — motorene der kundene dine stiller spørsmål før Google.
ChatGPT
OpenAI
Claude
Anthropic
Gemini
Google
Perplexity
Perplexity
Mistral
Mistral AI
Én plattform. Hele AI-stakken.
3LA kobler seg til verktøyene teamet ditt allerede bruker – fra LLM-API-er og søkekonsoller til flatene der rapportene lander.
Søk & Webmaster-verktøy
Ahrefs
Bing Webmaster
Google Search Console
Analyse & personvern
GA4
Microsoft Clarity
Plausible
GetCookie
AI-infrastruktur
Vertex AI
SocialCrawl
Beautiful Soup
Brønnøysund Registeret
Arbeidsflyt & leveranse
WordPress
Google Docs
Slack
Notion
Jira
NotebookLM
Slutt å fly blindt på hvem som kravler siden din.
Gjør rå tilgangs-logger om til et AI-synlighets-signal på under 10 minutter — ingen schema-mapping, ingen SQL, ingen ombygging.
Prøv Log Analyzer gratisFinn sidene crawlerne ikke får lest
Se forespurte URL-er, statuskoder og besøksfrekvens i sammenheng. En mye besøkt side som svarer med feil, trenger et annet tiltak enn en nyttig side som aldri hentes. Sammenlign loggene med nettkartet og interne lenker før du endrer tilgangsreglene.
Hva loggene faktisk dokumenterer
Tilgangslogger viser forespørsler, ikke svarene en AI-assistent senere lager. User-agent-navn kan dessuten forfalskes. Bruk derfor botnavnet som et klassifiseringssignal, ikke som et identitetsbevis. Kombiner loggene med observerte siteringer og henvisningstrafikk når du vurderer effekt.
Ofte stilte spørsmål
Hvilke loggformater støttes?
Apache, Nginx, Cloudflare Enterprise og AWS CloudFront JSON — oppdages automatisk.
Hvilke AI-crawlere identifiseres?
200+ navngitte crawlere: GPTBot, ClaudeBot, PerplexityBot, Google-Extended, Bytespider, CCBot med flere.
Hvor langt tilbake går arkivet?
Opptil 90 dager. Filtrer på bot, URL og datointervall. Eksporter som CSV.
Hva er trusselgjenkjenning?
Flagger automatisk aggressive skrapere med alvorlighetsgrad og anbefalte robots.txt-oppføringer.
Kan jeg generere en robots.txt?
Ja. Ett-klikks AI-bevisst generator basert på observerte crawlere.
Hva er forskjellen fra Bot Tracker?
Logganalyse parser opplastede logger historisk. Bot Tracker klassifiserer i sanntid og kobler til siteringshendelser.