Skip to content
Maskinöversatt från det engelska originalet. Visa originalet
Crawlability - GEO

Webben blev just majoritetsmaskin – kan AI ens läsa din webbplats?

I juni 2026, för första gången i internethistorien, överträffade maskiner människor på webben: 57,5 % av HTML-trafiken är nu botar. Den milstolpen spelar roll – men det verkliga problemet för de flesta webbplatser är ett annat nummer: 69 % av AI-crawlers kan inte köra JavaScript. Om din webbplats renderar klient-sidan, ser en LLM en tom sida.

George, Baseline Labs maskot, håller en liten vänlig robot

Botar passerade människor online – 18 månader för tidigt

Den 3 juni 2026 publicerade Cloudflares VD Matthew Prince data från Cloudflare Radar som visade att botar för första gången hade överträffat mänskligt genererad HTML-trafik. Fördelningen: 57,5 % botar, 42,5 % människor. Prince hade förutspått att detta skulle ske på SXSW – hans uppskattning var ungefär 18 månader fel. "Agentisk trafik växer så snabbt att botar nu har passerat mänsklig trafik online för första gången i Internets historia", skrev han. Han tillade att han fortfarande är "häpnad över tillväxttakten" av icke-mänsklig trafik. Oberoende rapporterade NBC News en marginellt annorlunda läsning av 57,4 % botar / 42,6 % människor från samma Cloudflare-data, och Prince erkände att siffrorna är "lite röriga… men tydligt på andra sidan nu." Imperva Bad Bot Report 2026 (publicerad 29 april 2026) mätte separat 53 % automatiserad trafik över alla webbförfrågningar under 2025 – en annan korg som inkluderar API- och app-anrop, så de två siffrorna bör inte medelvärdesberäknas, men de pekar åt samma håll.

57.5%
Botars andel av HTML-trafik – juni 2026 (Cloudflare)
53%
Automatiserad andel av alla webbförfrågningar – 2025 (Imperva)
−18 mån
Före Princes egen SXSW-prognos

De flesta av dessa botar är inte AI, och AI-botarna skickar knappt tillbaka trafik

De 57,5% är en total bot-siffra, inte enbart en AI-siffra. Cloudflares egen uppdelning (maj 2026) placerar AI-crawlers på ungefär 20,3% av verifierad bottrafik, med AI-sökbots som lägger till cirka 6,5% utöver det. Resten är äldre sökindexerare, upptidsövervakare, flödeshämtare och säkerhetsskannrar – botar som har funnits i årtionden. Och även inom AI-segmentet är 51,8% av AI-crawler- förfrågningarna för modellträning snarare än för att visa svar i sökningar. Endast 9,3% av AI-crawler-förfrågningarna är för sökändamål. Tränings-crawlers ger i princip noll hänvisningstrafik: Cloudflares data visar att ClaudeBot träffar sidor med ett crawl-till-hänvisningsförhållande på ungefär 70 900:1 (juni 2025) och GPTBot på 1 600:1. Googles kombinerade crawler ligger på ett jämförelsevis blygsamt 9–10:1. Maskinmajoriteten är verklig; dess sammansättning spelar enorm roll för vad du faktiskt bör göra åt det.

Botkategori Andel verifierad bottrafik Hänvisningstrafikförhållande
AI-crawlers (träning)~51.8% av AI-förfrågningarClaudeBot ~70,900:1 - GPTBot ~1,600:1
AI-sökrobotar~6.5% av verifierade botarVarierar; Google AI ~9–10:1
Äldre sökindexerare, övervakare, flödenÅterståendeTrafikgenererande

Källa: Cloudflare Radar, maj–juni 2026; crawl-till-refer-kvoter från Cloudflares bloggdata, juni 2025.

69% av AI-crawlers kan inte köra JavaScript – och de låtsas inte annorlunda

Vercel och MERJ analyserade mer än 500 miljoner GPTBot-hämtningar och hittade inga bevis på JavaScript-exekvering. GPTBot laddar ner JS-filer ungefär 11,5% av gångerna; ClaudeBot gör det runt 23,8% av gångerna – men ingen av dem kör dem faktiskt. En React-, Vue- eller Angular-applikation med en sida serverar dessa crawlers en tom <div id="root"></div> och inget annat. Det enda betydande undantaget är Gemini: eftersom den använder Googles crawler-infrastruktur, renderar den JavaScript. Googles egen vägledning om AI-funktioner bekräftar renderingsförmåga som en förutsättning för citering, vilket gör Googlebot-familjens crawlers till den enda AI-vägen som tillförlitligt ser klientrenderat innehåll. Detta lämnar 69% av AI-crawlers utestängda från majoriteten av moderna webbapplikationer.

69%
AI-crawlers som inte kan exekvera JavaScript (Vercel/MERJ)
500M+
Analyserade GPTBot-hämtningar – ingen JS-exekvering hittades
1
Stor AI-crawler som renderar JS: Gemini (via Googlebot)

Källa: Vercel/MERJ - The Rise of the AI Crawler.

Vad denna data berättar – och inte berättar – för dig

Tre saker värda att ha i åtanke tillsammans med de övergripande siffrorna:

Förfrågningar ≠ engagemang. Siffran 57,5 % räknar HTTP-förfrågningar, inte uppmärksamhet, tid på sidan eller spenderade pengar. Med alla mått på engagemang eller intäkter dominerar människor fortfarande webben med stor marginal. Prince påpekade detta själv och noterade att datan omfattar HTML-trafik och kallade det "lite rörigt". Det pekar på vart saker är på väg, men det hävdar inte att AI-agenter redan spenderar mer än mänskliga shoppare.

Enkel-leverantörs-vy. Cloudflare dirigerar ungefär 20 % av webbtrafiken. Dess urval är stort och mångsidigt, men det är inte hela internet – webbplatser med hög trafik som kringgår Cloudflare är osynliga för denna datamängd.

Krypbarhet är nödvändigt, inte tillräckligt. Att få din HTML framför en AI-crawler är bara grunden. Att vara läsbar garanterar inte citat - 28,3 % av ChatGPT:s mest citerade sidor har noll organisk synlighet på Google, vilket betyder att korrelationen mellan krypbarhet och citat är lös i båda riktningarna. Modellens träningsdata har en gräns; sök-lägeshämtning är selektiv; och förhållandena mellan krypning och hänvisning ovan visar att de flesta AI-crawlers inte har som affärsidé att skicka tillbaka trafik. Att fixa din rendering är en förutsättning; i sig själv kommer det inte att få dig citerad.

Server-side rendering är grundläggande för AI-synlighet

Den praktiska implikationen är direkt: om din marknadsföringssida, landningssidor eller produktsidor är rena klient-sidiga React eller Vue, läser de relevanta crawlers – GPTBot, ClaudeBot, PerplexityBot – en tom sida (förutsatt att du inte av misstag har blockerat sökrobotarna tillsammans med träningsrobotarna). Statisk sidgenerering (SSG) och server-side rendering (SSR) har gått från en prestandaoptimering till minimikravet för att vara läsbar för de maskiner som nu utgör majoriteten på webben. Utöver rendering fann Vercel/MERJ-studien att crawlers följde strukturerade signaler (sitemaps, kanoniska taggar, ren HTML) mer tillförlitligt än JavaScript-tung navigering. Googles dokumentation för AI-funktioner upprepar detta: strukturerad, crawlbar markup är förutsättningen för att visas i AI-genererade svar.

Metod AI-crawlbar? Anteckningar
Statisk HTML / SSGJaBästa genomsökningsomfånget över alla botar
Server-side rendering (SSR)JaRenderar vid förfrågningstillfället; fullständigt innehåll tillgängligt
Klient-sidig SPA (React/Vue/Angular)Endast GeminiGPTBot och ClaudeBot ser tomt rotelement
Hybrid (SSR + hydration)JaServerrenderat skal synligt; säkrast för AI + UX

Se hur AI läser din webbplats

Källor: Cloudflare Radar (HTML-trafikfördelning, AI-crawler-uppdelning, crawl-till-hänvisningsförhållanden, maj–juni 2026); Matthew Prince via The Decoder (3 juni 2026); Vercel/MERJ - The Rise of the AI Crawler (JS-exekveringsanalys, 500M+ GPTBot-hämtningar); Google Search Central - AI features (renderingskrav); Imperva Bad Bot Report 2026 (53 % automatiserad trafik, publicerad 29 april 2026). NBC News (57,4 %/42,6 % uppdelning, oberoende läsning av Cloudflare-data).

Miniatyrbild (varumärkesbehandlad från licensierade original): Datacenter av Carl Lender från Sunrise, USA, CC BY 2.0, via Wikimedia Commons.

Källor (3)
  1. Cloudflare Radar (radar.cloudflare.com)
  2. Googles egen vägledning (developers.google.com)
  3. Vercel/MERJ - The Rise of the AI Crawler (vercel.com)

Se hur AI-sök ser din webbplats

Gratis AI-synlighetskontroll på under en minut

Kontrollera min sajt
George
Online
0%