Agent traffic
Se, hvilke AI-crawlere og AI-assistenter der besøger dit website, og hvilke sider de henter. Lær at tilslutte dit site og læse AI-trafikken.
Opdateret
Når en AI-crawler besøger dit website, kan den hente information om dine produkter, services eller artikler. Andre AI-agenter besøger sider i forbindelse med en konkret brugers spørgsmål.
Med "Agent traffic" kan du se, hvilke AI-agenter der besøger dit website, hvor ofte de kommer, og hvilke sider de henter.
Det giver dig et andet perspektiv end dine AI-svar: Her undersøger du selve besøgene på dit website, ikke blot hvad AI skriver om din virksomhed.
Find "Agent traffic"
Du finder siden under "Traffic" → "Agent traffic".
Dataene gælder det brand, du har valgt i Klarvu.
Hvis du endnu ikke har tilsluttet et website, ser du kortet "See which AI agents read your site". Herfra kan du begynde opsætningen gennem din hostingudbyder.
Tilslut dit website
Klik på "Connect a site" for at komme i gang.
Du kan vælge mellem to tilslutningsmetoder:
| Metode | Hvordan fungerer det? |
|---|---|
| "Vercel" | Sender logs fra dit Vercel-projekt til Klarvu via en Log Drain. Kræver ingen kodeændringer, men dit projekt skal være på Vercel Pro eller Enterprise. |
| "API / middleware" | Sender oplysninger om AI-forespørgsler fra dit websites middleware eller direkte via API. Fungerer med Next.js og andre platforme og kan bruges på alle hostingplaner. |
Du vil også kunne se "Cloudflare", "Cloudflare Enterprise", "CloudFront", "Akamai" og "WordPress" markeret som "Coming soon". De kan endnu ikke vælges som tilslutningsmetode.
Vælg din hostingmetode
Klik på "Connect a site", og vælg enten "Vercel" eller "API / middleware".
Angiv dit domæne
Udfyld "Domain" med det website, du vil følge. Feltet er på forhånd udfyldt med dit brands website.
Du kan også udfylde "Name" for at give tilslutningen et genkendeligt navn, eksempelvis "Marketing site".
Klik derefter på "Continue".
Klarvu registrerer kun forespørgsler til det angivne domæne og dets subdomæner.
Gennemfør opsætningen
Følg instruktionerne for den valgte metode.
Ved "Vercel" skal du konfigurere en Log Drain. Ved "API / middleware" skal du tilføje det viste kodestykke eller sende oplysningerne via API.
Test forbindelsen
Brug den testkommando, Klarvu viser under opsætningen, for at kontrollere, at forespørgsler når frem.
Når forbindelsen fungerer, kan du begynde at se registrerede AI-besøg under "Agent traffic".
Kun ejere og administratorer kan tilslutte et website.
Hvis du ikke har de nødvendige rettigheder, vil du se beskeden "Ask an owner or admin to connect a site."
Opsætning med Vercel
Hvis dit website ligger på Vercel Pro eller Enterprise, kan du bruge en Log Drain uden at ændre koden på dit website.
Klarvu viser en "Drain destination URL" og en "API key header", begge med en "Copy"-knap. Hvert website har sin egen URL og nøgle, så genbrug dem ikke på tværs af sites.
Du skal derefter:
- Åbne dit teams "Settings" → "Drains" i Vercel, klikke på "Add Drain" og vælge "Custom HTTP endpoint" og "Logs".
- Give drainen et navn, vælge "Specific Projects" og vælge det projekt, der serverer dit website.
- Vælge logkilderne "Functions", "Edge Functions", "Static Files" og "Rewrites".
- Vælge mindst miljøet "Production" og lade "Sampling Rate" stå på 100 %.
- Indsætte Klarvus URL under "URL", vælge "JSON" under "Encoding", slå "Custom Headers" til og indsætte den viste header. Klik derefter på "Create Drain".
Når det er konfigureret, sender Vercel dine logs til Klarvu, som udvælger forespørgslerne fra AI-agenter.
Opsætning med API eller middleware
Hvis du ikke bruger Vercel, kan du vælge "API / middleware".
Klarvu viser et kodestykke til Next.js, som du lægger i filen proxy.ts (Next.js 16) eller middleware.ts (ældre versioner) i roden af din app.
Du skal:
- Gemme den viste nøgle som miljøvariablen
KLARVU_AGENT_TRAFFIC_KEY. - Tilføje det viste kodestykke. Har du allerede en middleware, tilføjer du blot AI-tjekket til den.
- Udgive ændringen på dit website.
AI-forespørgsler sendes i baggrunden, så indsamlingen ikke gør siden langsommere.
Bruger du ikke Next.js, kan du i stedet sende JSON med en POST-forespørgsel til det ingest-endpoint, Klarvu viser. Nøglen sendes som Bearer-token, og du kan sende op til 500 forespørgsler ad gangen.
Tjek, at forbindelsen virker
Under opsætningen viser Klarvu en curl-kommando, som du kan bruge til at sende en testforespørgsel med user agent-navnet "Klarvu-Testbot".
Når testen modtages, skifter status typisk til "Active" inden for et minut eller to.
Testforespørgsler vises under "Recent agent requests" markeret med "Test", men de tæller aldrig med i dine tal.
Forstå forbindelsens status
Under "Connected sites" kan du følge status for de websites, du har tilsluttet. Hver række viser også antallet af AI-besøg det seneste døgn og tidspunktet for den seneste levering.
| Status | Hvad betyder det? |
|---|---|
| "Pending" | Klarvu har endnu ikke modtaget noget fra dit website. De første data kommer typisk inden for få minutter efter korrekt opsætning. |
| "Receiving logs" | Klarvu modtager logs, men har endnu ikke registreret AI-besøg. |
| "Active" | Klarvu registrerer besøg fra AI-agenter. |
Hvis forbindelsen står som "Receiving logs", betyder det altså ikke nødvendigvis, at noget er galt. Det kan blot være, at ingen AI-agenter har besøgt dit website endnu.
Ejere og administratorer kan åbne opsætningen igen med "Setup" og afbryde forbindelsen med "Remove".
Forstå dine AI-besøg
Når Klarvu begynder at registrere AI-trafik, får du en oversigt over aktiviteten på dit website.
Du kan vælge mellem "24 hours", "7 days", "30 days" og "90 days". Standardperioden er 30 dage.
Øverst finder du fire nøgletal:
| Nøgletal | Hvad viser det? |
|---|---|
| "AI agent visits" | Antallet af registrerede AI-agentbesøg i perioden, inklusive ændringen fra den foregående periode. |
| "Pages visited" | Hvor mange sider AI-agenterne har besøgt, og hvor mange forskellige agenter der stod bag. |
| "Top agent" | Den AI-agent, der har stået for flest registrerede besøg. |
| "Retrieval visits" | Besøg, hvor en AI-assistent henter indhold i forbindelse med en konkret brugers forespørgsel. |
"Agent visits over time"
Grafen viser, hvordan AI-besøgene udvikler sig over tid, fordelt på virksomheden bag agenten.
Du kan se de største seks virksomheder og den øvrige trafik samlet under "Other".
Det gør det lettere at opdage, om aktiviteten eksempelvis stiger fra én bestemt AI-udbyder.
"Top agents"
Her kan du se de ti AI-agenter, der besøger dit website mest, hvem der står bag dem, og hvornår de senest blev registreret.
"Most visited pages"
Denne oversigt viser, hvilke sider AI-agenter besøger mest. Brug "Filter pages…" til at finde en bestemt side.
Du finder blandt andet:
- "Agent visits": Antallet af registrerede besøg på siden.
- "Agents": Hvor mange forskellige AI-agenter der har besøgt den.
- "Last visit": Hvornår den senest blev besøgt.
Det kan hjælpe dig med at se, om AI-agenter primært henter din forside, bestemte produktsider eller artikler.
"Recent agent requests"
Her finder du de 50 seneste registrerede forespørgsler.
Tabellen viser "Time", "Agent", "Page" og "Status".
Hvis der ikke er registreret AI-besøg i den valgte periode, vises "No AI agent visits yet" med en henvisning til at kontrollere forbindelsen under "Connected sites".
Hvorfor besøger AI-agenter dit website?
Ikke alle AI-agenter henter indhold med det samme formål.
Under "Why agents visit" fordeler Klarvu trafikken i tre kategorier.
| Kategori | Formål |
|---|---|
| "Training" | Indsamling af indhold, som kan bruges til at træne AI-modeller. |
| "Indexing" | Indsamling af indhold til en AI-søgetjeneste eller AI-assistents indeks. |
| "Retrieval" | En AI-assistent henter indhold fra dit website i forbindelse med en konkret brugers spørgsmål. |
Hvorfor er "Retrieval" interessant?
"Retrieval" er særligt interessant, fordi det viser, at en AI-assistent har hentet indhold i forbindelse med en brugers aktuelle forespørgsel.
Eksempler på retrieval-agenter er "ChatGPT-User", "Claude-User" og "Perplexity-User".
Det fortæller dig, at en AI-assistent har forsøgt at hente en side, men ikke om siden efterfølgende blev citeret eller anbefalet i svaret.
Hvis du vil se, hvilke hjemmesider AI faktisk henviser til, kan du bruge siden Kilder.
Hvilke AI-agenter følger Klarvu?
Klarvu genkender AI-crawlere og AI-assistenter fra alle de store AI-udbydere:
| Virksomhed | Agenter |
|---|---|
| OpenAI | GPTBot, OAI-SearchBot, ChatGPT-User |
| Anthropic | ClaudeBot, Claude-SearchBot, Claude-User, anthropic-ai |
| Perplexity | PerplexityBot, Perplexity-User |
| GoogleOther, Google-CloudVertexBot, Gemini-Deep-Research | |
| Apple | Applebot |
| Amazon | Amazonbot |
| Meta | Meta-ExternalAgent, Meta-ExternalFetcher |
| ByteDance | Bytespider |
| Common Crawl | CCBot |
| DuckDuckGo | DuckAssistBot |
| Mistral | MistralAI-User |
| Cohere | cohere-ai |
| You.com | YouBot |
| xAI | GrokBot, xAI-Bot |
Ofte stillede spørgsmål
Hvorfor ser jeg ingen AI-besøg?
Start med at kontrollere forbindelsen under "Connected sites".
Hvis status er "Pending", modtager Klarvu endnu ikke data. Hvis den er "Receiving logs", kommer data ind, men der er endnu ikke registreret forespørgsler fra AI-agenter.
Kontrollér også, at du ser på den rigtige periode.
Hvorfor kan jeg ikke se besøg fra en bestemt AI-platform?
Det betyder, at platformens agenter ikke har besøgt dit website i den valgte periode. Prøv eventuelt en længere periode, eksempelvis "90 days".
Gemmer Klarvu oplysninger om mine menneskelige besøgende?
Nej. "Agent traffic" gemmer kun forespørgsler fra AI-agenter. Menneskelige besøgendes forespørgsler bliver ikke gemt.
Mit website bruger ikke Vercel. Kan jeg stadig tilslutte det?
Ja. Du kan bruge "API / middleware", også hvis din hostingudbyder ikke har en færdig integration.
Du kan sende oplysninger via Next.js-middleware eller POST-forespørgsler fra en anden platform.
"Cloudflare", "Cloudflare Enterprise", "CloudFront", "Akamai" og "WordPress" er endnu ikke tilgængelige som selvstændige tilslutningsmetoder.
Betyder flere AI-agentbesøg, at AI nævner mig oftere?
Ikke nødvendigvis. "Agent traffic" viser forespørgsler til dit website, men fortæller ikke, om indholdet efterfølgende blev brugt i et AI-svar.
Du kan undersøge sidernes tilgængelighed med "Crawlability Checker", se faktiske citationer under "Kilder" og læse om besøgende, der kommer fra AI-svar, på siden AI referrals (GA4).