Skip to content
Maskinoversat fra den engelske original. Se originalen
Crawlability - GEO

Internettet er netop blevet maskin-domineret – kan AI overhovedet læse dit website?

I juni 2026, for første gang i internettets historie, oversteg antallet af maskiner antallet af mennesker på nettet: 57,5 % af HTML-trafikken er nu bots. Den milepæl er vigtig – men det virkelige problem for de fleste websites er et andet tal: 69 % af AI-crawlere kan ikke udføre JavaScript. Hvis dit website gengives på klientsiden, ser en LLM en tom side.

George, Baseline Labs' maskot, der holder en lille venlig robot

Bots overhalede mennesker online – 18 måneder for tidligt

Den 3. juni 2026 offentliggjorde Cloudflare CEO Matthew Prince data fra Cloudflare Radar der viste, at bots for første gang havde overgået menneskeskabt HTML-trafik. Fordelingen: 57,5 % bots, 42,5 % mennesker. Prince havde forudsagt, at dette ville ske på SXSW – hans estimat var cirka 18 måneder ude. "Agentisk trafik vokser så hurtigt, at bots nu for første gang i Internettets historie har overhalet menneskelig trafik online," skrev han. Han tilføjede, at han stadig er "forbløffet over vækstraten" for ikke-menneskelig trafik. Uafhængigt rapporterede NBC News en marginalt anderledes læsning på 57,4 % bots / 42,6 % mennesker fra de samme Cloudflare-data, og Prince erkendte, at tallene er "lidt rodede… men klart på den anden side nu." Imperva Bad Bot Report 2026 (udgivet 29. april 2026) målte separat 53 % automatiseret trafik på tværs af alle webanmodninger i 2025 – en anden kategori, der inkluderer API- og app-kald, så de to tal bør ikke gennemsnitliggøres, men de peger i samme retning.

57,5 %
Bot-andel af HTML-trafik – juni 2026 (Cloudflare)
53 %
Automatiseret andel af alle webanmodninger – 2025 (Imperva)
−18 måneder
Foran Princes egen SXSW-forudsigelse

De fleste af disse bots er ikke AI, og AI-bots sender næsten ingen trafik tilbage

De 57,5 % er et samlet bot-tal, ikke et AI-kun-tal. Cloudflares egen opdeling (maj 2026) placerer AI-crawlere på cirka 20,3 % af verificeret bot-trafik, med AI-søgebots, der tilføjer omkring 6,5 % oveni. Resten er ældre søgeindekseringsrobotter, oppetidsovervågning, feed-hentning og sikkerhedsscannere – bots, der har eksisteret i årtier. Og selv inden for AI-segmentet er 51,8 % af AI-crawler- anmodninger til modeltræning snarere end til at vise svar i søgninger. Kun 9,3 % af AI-crawler-anmodninger er til søgeformål. Træningscrawlere returnerer effektivt nul henvisningstrafik: Cloudflares data viser, at ClaudeBot rammer sider med et crawl-til-henvisningsforhold på cirka 70.900:1 (juni 2025) og GPTBot på 1.600:1. Googles kombinerede crawler ligger på et forholdsvis beskedent 9–10:1. Maskinmajoriteten er reel; dens sammensætning betyder enormt meget for, hvad du faktisk bør gøre ved det.

Botkategori Andel af verificeret bottrafik Henvisningstrafikforhold
AI-crawlere (træning)~51,8 % af AI-anmodningerClaudeBot ~70.900:1 - GPTBot ~1.600:1
AI-søgerobotter~6,5 % af verificerede botsVarierer; Google AI ~9–10:1
Ældre søgeindekseringsrobotter, monitorer, feedsRestenTrafikgenererende

Kilde: Cloudflare Radar, maj-juni 2026; crawl-til-henvisningsforhold fra Cloudflare blogdata, juni 2025.

69% af AI-crawlere kan ikke køre JavaScript – og de lader ikke som om andet

Vercel og MERJ analyserede mere end 500 millioner GPTBot-hentninger og fandt ingen beviser for JavaScript-udførelse. GPTBot downloader JS-filer omkring 11,5% af tiden; ClaudeBot gør det omkring 23,8% af tiden – men ingen af dem kører dem faktisk. En React, Vue eller Angular single-page app serverer disse crawlere en tom <div id="root"></div> og intet andet. Den eneste meningsfulde undtagelse er Gemini: fordi den kører på Googles crawler-infrastruktur, gengiver den JavaScript. Googles egen vejledning om AI-funktioner bekræfter gengivelseskapacitet som en forudsætning for citering, hvilket gør Googlebot-familie-crawlere til den eneste AI-sti, der pålideligt ser klient-gengivet indhold. Det efterlader 69% af AI-crawlerne udelukket fra størstedelen af moderne webapps.

69%
AI-crawlere, der ikke kan udføre JavaScript (Vercel/MERJ)
500M+
GPTBot-hentninger analyseret – ingen JS-udførelse fundet
1
Stor AI-crawler, der gengiver JS: Gemini (via Googlebot)

Kilde: Vercel/MERJ - The Rise of the AI Crawler.

Hvad disse data fortæller – og ikke fortæller – dig

Tre ting, der er værd at huske på sammen med hovedtallene:

Anmodninger ≠ engagement. Tallet på 57,5 % tæller HTTP-anmodninger, ikke opmærksomhed, tid på siden eller brugte penge. Målt på engagement eller omsætning dominerer mennesker stadig internettet med stor margin. Prince påpegede selv dette og bemærkede, at dataene dækker HTML-trafik og kaldte det "lidt rodet". Det peger på, hvor tingene er på vej hen, men det hævder ikke, at AI-agenter allerede overgår menneskelige shoppere.

Enkeltleverandør-visning. Cloudflare dirigerer cirka 20 % af webtrafikken. Deres stikprøve er stor og forskelligartet, men det er ikke hele internettet – høj-trafik ejendomme, der omgår Cloudflare, er usynlige for dette datasæt.

Gennemsøgelighed er nødvendig, ikke tilstrækkelig. At få din HTML foran en AI-crawler er kun gulvet. At være læsbar garanterer ikke citation – 28,3 % af ChatGPT's mest citerede sider har nul Google organisk synlighed, hvilket betyder, at korrelationen mellem gennemsøgelighed og citation er løs i begge retninger. Modeltræningsdata har en grænse; søgemodus-hentning er selektiv; og forholdene mellem gennemsøgning og henvisning ovenfor viser, at de fleste AI-crawlere ikke har til formål at sende trafik tilbage. At rette din rendering er en forudsætning; i sig selv vil det ikke få dig citeret.

Server-side rendering er en nødvendighed for AI-synlighed

Den praktiske implikation er direkte: hvis dit marketingsite, landingssider eller produktsider er rene klient-side React eller Vue, læser de crawlere, der betyder noget – GPTBot, ClaudeBot, PerplexityBot – en tom side (forudsat at du ikke ved et uheld har blokeret søgerobotterne sammen med træningsrobotterne). Statisk sitegenerering (SSG) og server-side rendering (SSR) er gået fra en ydelsesoptimering til minimumsbarrieren for at være læsbar for de maskiner, der nu udgør flertallet på nettet. Ud over rendering fandt Vercel/MERJ-undersøgelsen, at crawlere fulgte strukturerede signaler (sitemaps, kanoniske tags, ren HTML) mere pålideligt end JavaScript-tung navigation. Googles dokumentation for AI-funktioner gentager dette: struktureret, crawlbar markup er forudsætningen for at optræde i AI-genererede svar.

Tilgang AI-crawlbar? Noter
Statisk HTML / SSGJaBedste crawl-dækning på tværs af alle bots
Server-side rendering (SSR)JaGengives ved anmodning; fuldt indhold tilgængeligt
Client-side SPA (React/Vue/Angular)Kun GeminiGPTBot og ClaudeBot ser tomt rodelement
Hybrid (SSR + hydration)JaServer-gengivet skal synlig; sikrest for AI + UX

Se hvordan AI læser dit website

Kilder: Cloudflare Radar (HTML-trafikfordeling, AI-crawler-opdeling, crawl-til-henvisningsforhold, maj–juni 2026); Matthew Prince via The Decoder (3. juni 2026); Vercel/MERJ - The Rise of the AI Crawler (JS-udførelsesanalyse, 500M+ GPTBot-hentninger); Google Search Central - AI features (gengivelseskrav); Imperva Bad Bot Report 2026 (53 % automatiseret trafik, offentliggjort 29. april 2026). NBC News (57,4 %/42,6 % opdeling, uafhængig læsning af Cloudflare-data).

Miniaturebillede (brand-behandlet fra licenserede originaler): Datacenter af Carl Lender fra Sunrise, USA, CC BY 2.0, via Wikimedia Commons.

Kilder (3)
  1. Cloudflare Radar (radar.cloudflare.com)
  2. Googles egen vejledning (developers.google.com)
  3. Vercel/MERJ - The Rise of the AI Crawler (vercel.com)

Se hvordan AI-søgning ser dit websted

Gratis AI-synlighedstjek på under et minut

Tjek min side
George
Online
0%