Roinneann Cloudflare róbait AI ina dtrí ar 15 Meán Fómhair

Éiríonn trí cinn d'aon lasc amháin

Is é argóint Cloudflare maidir leis an dénártha a scaoileadh ná go mbíonn an lipéad ag bogadh i gcónaí. Mar a deir a bhfógra an 1 Iúil, "d'fhéadfaimis díospóireacht a dhéanamh faoin teorainn do cad a cháilíonn mar 'AI' inniu, ach ansin a fháil amach go n-athraíonn an caighdeán amárach", mar sin fiafraíonn an aicmiú nua cad atá á dhéanamh ag róbat ar do shuíomh in ionad cén chuideachta a sheol é. Ritheann an tacsanomaíocht iomlán go dtí aon cheann déag d'iompraíochtaí, ó Fhálú Fothaí go Tástáil Slándála. Tá trí cinn acu sin na cinn is féidir le gach custaiméir, lena n-áirítear Saor in Aisce, a shocrú dóibh féin anois.

Tagann dhá athrú níos lú leis. Ní catagóir inti féin a thuilleadh é cuardach AI: deir Cloudflare anois nach bhfuil aon idirdhealú suntasach idir "Cuardach AI" agus cuardach traidisiúnta, agus gur Cuardach iad araon. Agus ní chiallaíonn sé a thuilleadh go bhfuil cead ag róbat fíoraithe. Ní dhéanann fíorú ach róbat incháilithe don rud a cheadaíonn a chatagóir, mar sin is í an chatagóir a shocraíonn tú an rud a chinneann rochtain.

Cé a fhaigheann socrú nach ndearna siad riamh

Léigh an fógra agus gheobhaidh tú athrú cúng. Deir an blagphost go ndéanfar, ar an 15 Meán Fómhair, "do gach fearann nua a thagann ar bord Cloudflare, na catagóirí Traenála agus Gníomhaire a bhlocáil de réir réamhshocraithe ar na leathanaigh a thaispeánann fógraí, cé go bhfanfaidh Cuardach ceadaithe de réir réamhshocraithe". Fearainn nua amháin. Níl aon rud le déanamh ag aon duine a bhfuil suíomh á reáchtáil acu cheana féin.

Tá an preasráiteas a foilsíodh an lá céanna níos leithne. Cuireann sé na réamhshocruithe nua i bhfeidhm ar chustaiméirí nua agus ar shuímh nua a chruthaíonn custaiméirí reatha, agus ansin cuireann sé abairt leis nach bhfuil sa bhlagphost: "Ar an 15 Meán Fómhair, 2026 déanfar na hathruithe seo freisin do gach custaiméir saor in aisce atá ann cheana féin nár athraigh a gcuid socruithe faoin 15 Meán Fómhair, 2026 ina bpainéal." Thuairiscigh TechCrunch na trí ghrúpa chéanna an lá sin. Má tá gnó beag agat ar phlean saor in aisce Cloudflare nár oscail riamh na socruithe róbat, is é an preasráiteas an doiciméad a chuireann síos ort, agus is fiú gníomhú air.

Tá teorainn amháin tábhachtach sula dtosaíonn aon duine ag scaoll. Ní mhúchann an réamhshocrú nua rochtain AI ar shuíomh iomlán. Baineann sé le leathanaigh a deir braiteadh uathoibrithe Cloudflare a thaispeánann fógraí, agus is é réasúnaíocht Cloudflare go marcálann fógra leathanach a raibh sé i gceist ag úinéir an tsuímh go dtiocfadh duine air. Ní fhaigheann suíomh bróisiúir gan fógraíocht aon rud ón gclásal sin. Tá foilsitheoir, suíomh oidis nó aon duine a reáchtálann fardal taispeána go díreach ann.

Áirítear Googlebot mar róbat oiliúna

Seo an chuid a d'fhéadfadh fíor-airgead a chostas ort, agus is beag baint atá aici le AI. Déanann Googlebot, Applebot agus BingBot sníomh le haghaidh cuardaigh agus le haghaidh oiliúna faoi aon ghníomhaire úsáideora amháin. Réitíonn Cloudflare é sin trí an riail is déine is infheidhme a ghlacadh, agus deir sé go soiléir: "déanfaidh custaiméirí a roghnaigh Oiliúint a bhlocáil (trí na roghanna nua chun trácht AI a bhainistiú, nó tríd an seanseirbhís Block AI bots) crawlers ilchuspóireacha ar nós Googlebot, Applebot, agus BingBot a bhlocáil".

Tabhair faoi deara an dara leath den abairt sin. Tá an lasc "Block AI bots" aon-cliceáil a chuir go leor suíomhanna beaga ar siúl le linn 2025 á dhíbhe ar 15 Meán Fómhair, agus go dtí seo bhí snoíodóireacht shoiléir ina dhoiciméadú: "Eisíonn an rogha seo róbait ilchuspóireacha a úsáidtear le haghaidh Oiliúna agus le haghaidh Cuardaigh." Athraíonn an lasc brí faoi na daoine a d'athraigh é. An lasc céanna, an suíomh céanna, agus ó 15 Meán Fómhair tógann sé Googlebot leis.

Tá radharc luath ann cheana féin. Thuairiscigh Search Engine Journal ar 4 Lúnasa úinéir suímh ag cur síos ar an iompar seo go díreach: "Nuair a shocraím AI Training = Block, tosaíonn Googlebot agus Bingbot ag fáil freagraí HTTP 403 nuair a dhéanann siad iarracht mo sitemap a fháil. Chomh luath agus a dhíchumasaím an bloc AI Training, tá an sitemap inrochtana arís." Tuairisc amháin atá ansin seachas eachtra deimhnithe, agus d'iarr John Mueller ó Google breathnú air go príobháideach. D'áitíomar anuraidh go raibh bac a chur ar gach róbat AI ag cur infheictheacht brandaí i mbaol cheana féin, agus ardaíonn an riail measctha-crawler praghas an leagain neamhchruinn. Seiceáil do logaí féin seachas glacadh leis ar aon nós.

Níl foilsithe ag aon duine cén bot atá cén bot

Is é an chuid deacair d'aon duine atá ag iarraidh gníomhú ar seo ná nach bhfuil léarscáil foilsithe ag Cloudflare de na catagóirí nua in aghaidh an bhota. Is iad na botanna amháin a ainmnítear áit ar bith san fhógra ná ChatGPT-User, a thugtar mar shampla de Ghníomhaire, Gemini agus Claude ag tiomáint Chrome mar ghníomhairí úsáide brabhsálaí, agus Googlebot, Applebot agus BingBot mar an cás measctha Cuardaigh móide Oiliúna. Níl sé luaite cá dtagann GPTBot, ClaudeBot, PerplexityBot, Google-Extended nó Bytespider. Nuashonraíodh tábla tagartha bot Cloudflare féin go deireanach i mí Aibreáin 2026 agus úsáideann sé na lipéid roimhe seo fós: AI Crawler, AI Search, AI Assistant, Search Engine. Tá sé infertha ag aon duine a deir leat go muiníneach gur Oiliúint é GPTBot.

Níl úinéirí suíomhanna tar éis fanacht leis an léarscáil oifigiúil. Fuair léamh ar chomhaid robots.txt parsáilte Cloudflare Radar ag TechnologyChecker amach go raibh foilsitheoirí ag sórtáil botanna cuideachta amháin cheana féin i gcarnanna éagsúla: GPTBot OpenAI díchumasaithe 2.33 uair in aghaidh gach ceadaithe, cé go gceadaítear OAI-SearchBot OpenAI beagán níos minice ná mar a chuirtear bac air. Léiríonn Anthropic an cruth céanna, le ClaudeBot ag rith 2.39 go 1 in aghaidh agus Claude-User ag paracht go garbh, agus tá gníomhaire dí-roghnaithe oiliúna Apple Applebot-Extended ag 3.24 go 1 in aghaidh. Is comhaireamh amh fearainn iad sin ó ghrianghraf lae amháin de 4,223 comhad a tógadh ar 27 Iúil 2026, ní sciar den ghréasán, mar sin léigh iad mar phatrún seachas mar thomhas. Is é an patrún an chuid suimiúil: tá daoine ag cur bac ar oiliúint agus ag ceadú freagairt ón díoltóir céanna, de láimh, mar go dtí seo níor thug an bonneagar aon bhealach dóibh é a rá uair amháin.

A fhágann go bhfuil tú ag déanamh na mapála duit féin, in aghaidh an bhota, ó na rudaí a fhoilsíonn gach oibreoir faoina chuid crawlers féin. Sin é an post a bhfuil ár ciclipéid bot ann chun é a dhéanamh: cé a ritheann gach gníomhaire úsáideora, cad a fhaigheann sé, agus conas é a cheadú nó a bhac gan do crawler cuardaigh a thógáil síos leis.

Cén fáth a gceapann Cloudflare go bhfuil sé seo cothrom

Tá an cás bunaithe ar dhramhaíl agus ar éagothroime. Maidir le dramhaíl, deir Cloudflare go gcaitheann níos mó ná 50% den trácht crawl ó chraoltóirí AI ag ath-aisghabháil leathanaigh nár athraíodh, rud a chiallaíonn go bhfuil do bandaleithead ag íoc as leathanach atá ag an gcraoltóir cheana féin. Maidir le héagothroime, díríonn sé ar an gcóimheas idir leathanaigh a ndearnadh crawl orthu agus cuairteoirí a seoladh ar ais.

Bí cúramach leis na cóimheasa sin, mar is cóimheasa dara láimhe iad na cinn reatha. Luann post Cloudflare féin ó Iúil 2026 fós an raon 2025 ó 118:1 suas go dtí beagnach 50,000:1. Tagann na figiúirí 2026 atá i gcúrsaíocht ó thríú páirtithe ag léamh Cloudflare Radar, agus is é an tacar is soiléire a foilsíodh ná SEOmator, don fhuinneog rollach 28 lá ag críochnú 21 Iúil 2026.

Baineann dhá rabhadh le gach ceann de na huimhreacha sin. Deir nóta modheolaíochta Cloudflare féin go bhféadfadh na cóimheasa ró-mheastachán a dhéanamh ar eastóscadh, toisc nach mbíonn ceanntásc atreoraithe ag atreoruithe ó aipeanna dúchasacha agus mar sin ní shroicheann siad an t-ainmneoir riamh. Agus bogann siad go tapa. Léiríonn léamh SEOmator go bhfuil Anthropic ag titim ó thart ar 57,000:1 go dtí thart ar 2,300:1 i sé mhí, á thiomáint ag atreoruithe a bhí le feiceáil ar deireadh seachas ag aon titim i crawling. Tá cóimheas a luaitear gan a dháta beagnach gan chiall.

Faoi bhun na hargóinte cothroime tá argóint iomaíoch. Deir Cloudflare go bhfuil rochtain ag an inneall cuardaigh is mó "ar thart ar 2X níos mó faisnéise ná na príomhchuideachtaí AI toisc go ndéanann siad deacair do chustaiméirí fanacht inaimsithe gan a bheith á n-úsáid le haghaidh AI freisin", agus ainmníonn Matthew Prince an dóchas atá taobh thiar de: go spreagann na hathruithe réamhshocraithe atá beartaithe crawlers ilúsáideacha chun cuardach a scaradh ó úsáid agus oiliúint gníomhaire. Le níos mó ná 20% de na fearainn gréasáin taobh thiar de Cloudflare, is luamhán é sin atá dírithe ar Google chomh mór agus atá sé ar OpenAI. Deir Cloudflare freisin go dtiomáineann gníomhairí uathoibrithe agus róbónna níos mó ná leath de na hiarrataí gréasáin go léir anois, arb é a fhrámú é seachas figiúr socraithe, agus chuamar tríd an méid a thacaíonn agus nach dtacaíonn na huimhreacha sciar róbónna leis i bhí an gréasán tromlach-meaisín.

Tá bearna macánta amháin faoi gach rud. Is gné Fiontair é an uirlis a thaispeánann do chóimheas crawl-go-atreorú féin in aghaidh an oibreora, agus an bhfuil ceadú Cuardaigh ag ceannach rud ar bith duit, mar sin ní féidir leis an ngnó beag a iarrtar an glao seo a dhéanamh an fhianaise a bhfuil an argóint bunaithe uirthi a fheiceáil.

Cad a dhéanann tú i ndáiríre

1. Faigh amach cad atá socraithe agat. I bpainéal Cloudflare is é an cosán ná Socruithe Slándála, ansin Cumraigh Beartais Róbat AI. Cuireann gach ceann de Chuardach, Gníomhaire agus Oiliúint trí rogha ar fáil: bac ar gach leathanach, bac ar leathanaigh le fógraí, nó ceadaigh. Scríobh síos an méid a fhaigheann tú sula n-athraíonn tú rud ar bith. Rinne gníomhaireacht nó forbróir roimhe seo go leor de na socruithe seo.

2. Déan cinneadh arís ar an lasc oidhreachta. Má tá "Bac ar róbait AI" ar siúl, tá sé ag spáráil Googlebot, Applebot agus BingBot faoi láthair agus scoirfidh sé de sin a dhéanamh. Cuir socrú sainráite in ionad é in aghaidh na catagóire in ionad ligean dó dul in éag.

3. Déan cinneadh de réir iompair seachas de réir branda. Is é Cuardach an chatagóir a sheolann daoine ar ais, agus tá sé ceadaithe mar réamhshocrú ar chúis. Is fíor-bhreithiúnas é Gníomhaire: is iad sin iarratais le duine ag fanacht, mar sin má chuirtear bac orthu ciallaíonn sé go bhfaigheann custaiméir a iarrann ar chúntóir fút freagra a tógadh gan do leathanach. Is é Oiliúint an ceann is lú a chosnaíonn ort inniu má dhiúltaíonn tú.

4. Seiceáil cad atá á rá ag do robots.txt cheana féin. Rith curl https://yoursite.com/robots.txt. Má tá robots.txt bainistithe Cloudflare cumasaithe feicfidh tú comharthaí ábhair ag dearbhú go bhfuil crawling le haghaidh cuardaigh ceart go leor agus nach bhfuil crawling le haghaidh oiliúna, agus ó mhí Iúil tá an bac sin ag iompar use=reference freisin, a iarrann ar mheaisíní innéacsú, sliocht a dhéanamh agus nasc a dhéanamh ar ais in ionad atáirgeadh. Cinntigh nach bhfuil an comhad agus an painéal ag rá rudaí éagsúla.

5. Diúltaigh i scríbhinn mura dteastaíonn aon athrú uait. Deir Cloudflare gur féidir le húinéir suímh atá ag iarraidh a gcumraíocht reatha a choinneáil é sin a mharcáil i socruithe Slándála am ar bith roimh 15 Meán Fómhair, rud a dhearbhaíonn nach dteastaíonn aon athruithe uathu ar chrawlálaithe Oiliúna a chraolann le haghaidh Cuardaigh freisin.

6. Breathnaigh ar do logaí tar éis an dáta. Cuardaigh freagraí 403 ar Googlebot agus Bingbot ar URLanna léarscáil an tsuímh agus fothaí, agus seiceáil Search Console le haghaidh earráidí crawling an tseachtain sin. Taispeánann crawler cuardaigh atá faoi ghlas as leathanach a bhfuil fógraí air mar dhraíocht rangú mí ina dhiaidh sin.

Cuardaigh róbat sula gcuireann tú bac air

Ceisteanna a chuireann daoine faoi seo