EnglishDanskAutomatisk oversatDeutschAutomatisch übersetztEspañolTraducción automáticaSuomiAutomaattisesti käännettyFrançaisTraduction automatiqueItalianoTradotto automaticamenteNorskAutomatisk oversattNederlandsAutomatisch vertaaldPolskiPrzetłumaczone automatyczniePortuguêsTraduzido automaticamenteSvenskaAutomatiskt översatt
Maskinoversat fra den engelske original. Se originalen
AI crawlersTechnical SEOWeb trends
Crawlability · GEO

Nettet blev lige netop flertals-maskine - kan AI overhovedet læse dit site?

I juni 2026 oversteg maskiner for første gang i internethistorien mennesker på nettet: 57,5% af HTML-trafikken er nu bots. Det milepæl betyder noget - men det rigtige problem for de fleste websites er et andet tal: 69% af AI-crawlere kan ikke udføre JavaScript. Hvis dit site renderes på klientsiden, ser en LLM en tom side.

George, Baseline Labs' maskot, der holder en lille venlig robot

Bots oversteg mennesker online - 18 måneder før tid

Den 3. juni 2026 postede Cloudflare-CEO Matthew Prince data fra Cloudflare Radar som viste, at bots havde overstået menneskegenereret HTML-trafik for første gang. Fordelingen: 57,5% bots, 42,5% mennesker. Prince havde forudsagt, at dette ville ske på SXSW - hans estimat var cirka 18 måneder for tidligt. "Agentic-trafik vokser så hurtigt, at bots nu har passeret menneskelig trafik online for første gang i Internetets historie," skrev han. Han tilføjede, at han forbliver "forbløffet over vækstraten" for ikke-menneskelig trafik. Uafhængigt rapporterede NBC News en marginalt anderledes læsning af 57,4% bots / 42,6% mennesker fra de samme Cloudflare-data, og Prince anerkendte, at tallene er "lidt rodet… men klart på den anden side nu." Imperva Bad Bot Report 2026 (udgivet 29. april 2026) målte separat 53% automatiseret trafik på tværs af alle webforespørgsler i 2025 - en anden kategori, der inkluderer API- og app-opkald, så de to tal bør ikke gennemsnitliggøres, men de peger samme retning.

57,5%
Bot-andel af HTML-trafik - juni 2026 (Cloudflare)
53%
Automatiseret andel af alle webforespørgsler - 2025 (Imperva)
−18md
Foran Princes eget SXSW-forecast

De fleste af disse bots er ikke AI, og de AI-bots sender næsten ingen trafik tilbage

De 57,5% er et samlet bot-tal, ikke kun AI. Cloudflares egen opdeling (maj 2026) placerer AI-crawlere på cirka 20,3% af verificeret bot-trafik, med AI-søgebots der tilføjer omkring 6,5% oven i købet. Resten er ældre søgeindeksere, oppetidskontroller, feed-hentere og sikkerhedsscanners - bots der har eksisteret i årtier. Og selv inden for AI-delen, 51,8% af AI-crawler-anmodninger er til modeltraining snarere end til at præsentere svar i søgning. Kun 9,3% af AI-crawler-anmodninger er til søgeformål. Training-crawlere returnerer effektivt nul referral-trafik: Cloudflares data viser ClaudeBot der rammer sider med et crawl-til-refer-forhold på cirka 70.900:1 (juni 2025) og GPTBot på 1.600:1. Googles kombinerede crawler ligger på et sammenligneligt beskedent 9–10:1. Maskinmajoriteten er reel; dens sammensætning betyder enormt meget for hvad du faktisk bør gøre ved det.

Bot-kategori Andel af verificeret bot-trafik Referral-trafik-forhold
AI-crawlere (training)~51,8% af AI-anmodningerClaudeBot ~70.900:1 · GPTBot ~1.600:1
AI-søgebots~6,5% af verificerede botsVarierer; Google AI ~9–10:1
Ældre søgeindeksere, monitorer, feedsRestenTrafikgenererende

Kilde: Cloudflare Radar, maj–juni 2026; crawl-til-refer-forhold fra Cloudflare blog-data, juni 2025.

69% af AI-crawlere kan ikke køre JavaScript - og de foregiver ikke andet

Vercel og MERJ analyserede mere end 500 millioner GPTBot-hentninger og fandt nul bevis for JavaScript-udførelse. GPTBot downloader JS-filer cirka 11,5% af tiden; ClaudeBot gør det omkring 23,8% af tiden - men ingen af dem kører dem faktisk. En React-, Vue- eller Angular single-page app serverer disse crawlere en blank <div id="root"></div> og intet andet. Den ene meningsfulde undtagelse er Gemini: fordi det bruger Googles crawler-infrastruktur, renderer det JavaScript. Googles egen vejledning om AI-funktioner bekræfter renderingskapacitet som en forudsætning for citater, hvilket gør Googlebot-familie-crawlere til den eneste AI-vej, der pålideligt ser klient-rendereret indhold. Det efterlader 69% af AI-crawlere låst ude fra størstedelen af moderne webapps.

69%
AI-crawlere, der ikke kan udføre JavaScript (Vercel/MERJ)
500M+
GPTBot-hentninger analyseret - nul JS-udførelse fundet
1
Større AI-crawler, der renderer JS: Gemini (via Googlebot)

Kilde: Vercel/MERJ - The Rise of the AI Crawler.

Hvad disse data gør - og ikke gør - fortæller dig

Tre ting værd at holde sammen med overskriftstallene:

Anmodninger ≠ engagement. Tallet 57,5% tæller HTTP-anmodninger, ikke opmærksomhed, tid på siden eller penge brugt. Efter ethvert engagement- eller indtægtsmål dominerer mennesker stadig nettet med stor margin. Prince påpegede selv dette og bemærkede, at dataene dækker HTML-trafik og kaldte det "lidt rodet." Det peger på, hvor tingene er på vej hen, men det hævder ikke, at AI-agenter allerede bruger mere end menneskelige shoppere.

Enkelt-leverandør-visning. Cloudflare dirigerer cirka 20% af webtrafikken. Dens stikprøve er stor og mangfoldig, men det er ikke hele internettet - højtrafik-egenskaber, der omgår Cloudflare, er usynlige for dette datasæt.

Crawlability er nødvendig, ikke tilstrækkelig. At få dit HTML foran en AI-crawler er kun gulvet. At være læsbar garanterer ikke citat. Modeltrainingsdata har en cutoff; søgetilstand-hentning er selektiv; og crawl-til-referral-forholdet ovenfor viser, at de fleste AI-crawlere ikke er i gang med at sende trafik tilbage. At reparere din rendering er en forudsætning; i sig selv vil det ikke få dig citeret.

Server-side rendering er afgørende for AI-synlighed

Den praktiske konsekvens er direkte: hvis dit marketingwebsted, landingpages eller produktsider er ren client-side React eller Vue, læser crawlerne, der betyder noget - GPTBot, ClaudeBot, PerplexityBot - en blank side. Static site generation (SSG) og server-side rendering (SSR) er gået fra en ydelsesforbedring til minimumskravet for at være læsbar for de maskiner, der nu udgør størstedelen af internettet. Ud over rendering fandt Vercel/MERJ-studiet, at crawlerne fulgte strukturerede signaler (sitemaps, canonical tags, rent HTML) mere pålideligt end JavaScript-tung navigation. Googles dokumentation om AI-funktioner bekræfter dette: struktureret, crawlbar markup er forudsætningen for at blive vist i AI-genererede svar.

Tilgang AI-crawlbar? Noter
Statisk HTML / SSGJaBedst crawl-dækning på tværs af alle bots
Server-side rendering (SSR)JaRenderes på anmodningstidspunktet; fuldt indhold tilgængeligt
Client-side SPA (React/Vue/Angular)Kun GeminiGPTBot og ClaudeBot ser tomt root-element
Hybrid (SSR + hydration)JaServer-renderet shell synlig; sikreste for AI + UX

Se hvordan AI læser dit websted

Kilder: Cloudflare Radar (HTML-trafikfordeling, AI-crawler-opdeling, crawl-til-henvisningsforhold, maj–juni 2026); Matthew Prince via The Decoder (3. juni 2026); Vercel/MERJ - The Rise of the AI Crawler (JS-udførelsesanalyse, 500M+ GPTBot-hentninger); Google Search Central - AI-funktioner (renderingskrav); Imperva Bad Bot Report 2026 (53% automatiseret trafiktal, udgivet 29. april 2026). NBC News (57,4%/42,6% opdeling, uafhængig læsning af Cloudflare-data).

George
Online
0%

Hi, I'm George.

Ask me about your projects, reports, brand mentions, backlinks, or anything on the platform.