Hvis du plages av KI-roboter som "stjeler" ting fra din nettside eller bruker for mye ressurser, så kan du blokkere mange av disse.
Den mest effektive blokkeringen er å opprette en fil med navn .htaccess (merk innledende punktum i filnavnet!) i web-mappen din med følgende innhold, eller hvis du allerede har en slik fil, legge innholdet i toppen av filen:
RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^.*(AdsBot-Google|Amazonbot|anthropic-ai|Applebot|Applebot-Extended|AwarioRssBot|AwarioSmartBot|Bytespider|CCBot|ChatGPT|ChatGPT-User|Claude-Web|ClaudeBot|cohere-ai|DataForSeoBot|Diffbot|FacebookBot|facebookexternalhit|Google-Extended|GPTBot|ImagesiftBot|magpie-crawler|omgili|Omgilibot|peer39_crawler|PerplexityBot|YouBot|AhrefsBot|Barkrowler|SemrushBot|DotBot).*$ [NC]
RewriteRule .* - [F,L]