Blokkere AI-boter hos Domeneshop
Du stenger ute AI-crawlere ved å legge en .htaccess-fil i webmappen på webhotellet. Reglene svarer 403 Forbidden til botene du har listet. Domeneshop beskriver dette som den mest effektive måten.
Hvordan blokkerer jeg AI-boter på nettsiden min?
- Åpne webmappen på webhotellet.
- Lag en fil som heter
.htaccess. Navnet begynner med et punktum og har ingen ending. - Har du allerede en
.htaccess, legger du de nye reglene øverst i den og beholder resten. - Legg inn tre regler: slå på omskriving, pek ut botene og svar 403.
RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^.*(GPTBot|ClaudeBot|PerplexityBot|CCBot).*$ [NC]
RewriteRule .* - [F,L]
Listen i parentesen er botnavnene, skilt med |. [NC] gjør at store og små bokstaver ikke spiller noen rolle, og [F,L] svarer 403 og stopper videre behandling. Eksemplet er kortet ned; legg til flere navn etter behov.
Hvilke boter kan jeg blokkere?
Domeneshops eget eksempel lister disse navnene:
AdsBot-Google, Amazonbot, anthropic-ai, Applebot, Applebot-Extended, AwarioRssBot, AwarioSmartBot, Bytespider, CCBot, ChatGPT, ChatGPT-User, Claude-Web, ClaudeBot, cohere-ai, DataForSeoBot, Diffbot, FacebookBot, facebookexternalhit, Google-Extended, GPTBot, ImagesiftBot, magpie-crawler, omgili, Omgilibot, peer39_crawler, PerplexityBot, YouBot, AhrefsBot, Barkrowler, SemrushBot, DotBot, Seznam, Sogou.
Noen av dem er ikke AI-boter. facebookexternalhit henter forhåndsvisninger når noen deler en lenke på Facebook, og AdsBot-Google sjekker annonsesider. Fjern navn du vil beholde besøk fra.
Hva blokkerer jeg egentlig bort?
Å blokkere en bot betyr at innholdet ikke brukes av den tjenesten, og at du ikke blir sitert av den. En ChatGPT- eller Claude-bruker som spør om bedriften din får da ikke noe fra nettsiden din. Vurder om du vil bort fra AI-søk eller bare vil stoppe opplæring av modeller. Navnene gjelder ulike formål, så du kan velge enkelte.
Åpne nettsiden etterpå og se at den fortsatt vises. Slutter den å virke, fjern reglene igjen og se nettsiden virker ikke.
Kan en AI-assistent hjelpe med dette?
Nei, ikke med selve filen. domeneschluse jobber med e-post og DNS, ikke med filene på webhotellet, så assistenten kan ikke lage eller endre en .htaccess. Du kan be den skrive botlisten du vil ha, og så legge den inn selv. Slik kobler du til.