Webben blev just maskindominerad – kan AI ens läsa din webbplats?

Botar passerade människor online – 18 månader för tidigt

Den 3 juni 2026 publicerade Cloudflares VD Matthew Prince data från Cloudflare Radar som visade att botar för första gången hade överträffat mänskligt genererad HTML-trafik. Fördelningen: 57,5 % botar, 42,5 % människor. Prince hade förutspått att detta skulle ske på SXSW – hans uppskattning var ungefär 18 månader fel. "Agentisk trafik växer så snabbt att botar nu har passerat mänsklig trafik online för första gången i Internets historia", skrev han. Han tillade att han fortfarande är "häpen över tillväxttakten" för icke-mänsklig trafik. Oberoende rapporterade NBC News en marginellt annorlunda läsning på 57,4 % botar / 42,6 % människor från samma Cloudflare-data, och Prince erkände att siffrorna är "lite röriga… men tydligt på andra sidan nu." Imperva Bad Bot Report 2026 (publicerad 29 april 2026) mätte separat 53 % automatiserad trafik över alla webbförfrågningar under 2025 – en annan kategori som inkluderar API- och appanrop, så de två siffrorna bör inte medelvärdesberäknas, men de pekar åt samma håll.

De flesta av dessa botar är inte AI, och AI-botarna skickar knappt tillbaka någon trafik

De 57,5% är en total siffra för botar, inte enbart för AI. Cloudflares egen uppdelning (maj 2026) placerar AI-crawlers på ungefär 20,3% av verifierad bottrafik, med AI-sökbotar som lägger till cirka 6,5% utöver det. Resten är äldre sökindexerare, upptidsövervakare, flödeshämtare och säkerhetsskannrar – botar som har funnits i årtionden. Och även inom AI-segmentet är 51,8% av AI-crawlerförfrågningarna för modellträning snarare än för att visa svar i sökningar. Endast 9,3% av AI-crawlerförfrågningarna är för sökändamål. Tränings-crawlers ger praktiskt taget ingen hänvisningstrafik: Cloudflares data visar att ClaudeBot träffar sidor med ett crawl-till-hänvisningsförhållande på ungefär 70 900:1 (juni 2025) och GPTBot på 1 600:1. Googles kombinerade crawler ligger på ett jämförelsevis blygsamt 9–10:1. Maskinmajoriteten är verklig; dess sammansättning spelar enorm roll för vad du faktiskt bör göra åt det.

Källa: Cloudflare Radar, maj–juni 2026; crawl-till-refer-förhållanden från Cloudflares bloggdata, juni 2025.

69% av AI-crawlers kan inte köra JavaScript – och de låtsas inte annorlunda

Vercel och MERJ analyserade mer än 500 miljoner GPTBot-hämtningar och hittade inga bevis på JavaScript-exekvering. GPTBot laddar ner JS-filer ungefär 11,5% av gångerna; ClaudeBot gör det runt 23,8% av gångerna – men ingen av dem kör dem faktiskt. En React, Vue eller Angular single-page app serverar dessa crawlers en tom <div id="root"></div> och inget annat. Det enda betydande undantaget är Gemini: eftersom den använder Googles crawler-infrastruktur, renderar den JavaScript. Googles egen vägledning om AI-funktioner bekräftar renderingsförmåga som en förutsättning för citering, vilket gör Googlebot-familjens crawlers till den enda AI-vägen som pålitligt ser klientrenderat innehåll. Det lämnar 69% av AI-crawlers utestängda från majoriteten av moderna webbappar.

Källa: Vercel/MERJ - The Rise of the AI Crawler.

Vad denna data berättar – och inte berättar – för dig

Tre saker värda att ha i åtanke tillsammans med huvudnumren:

Förfrågningar ≠ engagemang. Siffran 57,5 % räknar HTTP-förfrågningar, inte uppmärksamhet, tid på sidan eller spenderade pengar. Med alla engagemangs- eller intäktsmått dominerar människor fortfarande webben med stor marginal. Prince påpekade detta själv och noterade att data omfattar HTML-trafik och kallade det "lite rörigt". Det pekar på vart saker är på väg, men det hävdar inte att AI-agenter redan spenderar mer än mänskliga shoppare.

Enkel-leverantörsvy. Cloudflare dirigerar ungefär 20 % av webbtrafiken. Dess urval är stort och mångsidigt, men det är inte hela internet – högtrafikerade egenskaper som kringgår Cloudflare är osynliga för denna datamängd.

Krypbarhet är nödvändigt, inte tillräckligt. Att få din HTML framför en AI-crawler är bara grunden. Att vara läsbar garanterar inte citat – 28,3 % av ChatGPT:s mest citerade sidor har noll organisk synlighet på Google, vilket innebär att korrelationen mellan krypbarhet och citat är lös i båda riktningarna. Modellens träningsdata har en brytpunkt; sökmodens hämtning är selektiv; och förhållandena mellan crawl och hänvisning ovan visar att de flesta AI-crawlers inte är ute efter att skicka tillbaka trafik. Att fixa din rendering är en förutsättning; i sig själv kommer det inte att få dig citerad.

Server-side rendering är grundläggande för AI-synlighet

Den praktiska implikationen är direkt: om din marknadsföringssida, landningssidor eller produktsidor är ren klient-side React eller Vue, läser de viktiga crawlers – GPTBot, ClaudeBot, PerplexityBot – en tom sida (förutsatt att du inte av misstag har blockerat sökrobotarna tillsammans med träningsrobotarna). Statisk sidgenerering (SSG) och server-side rendering (SSR) har gått från en prestandaoptimering till minimikravet för att vara läsbar för de maskiner som nu utgör majoriteten på webben. Utöver rendering fann Vercel/MERJ-studien att crawlers följde strukturerade signaler (sitemaps, kanoniska taggar, ren HTML) mer tillförlitligt än JavaScript-tung navigering. Googles AI-funktioner dokumentation upprepar detta: strukturerad, crawlbar markup är förutsättningen för att visas i AI-genererade svar.

Se hur AI läser din webbplats