Hosting » Historie » Version 1
Jens Falk, 21.03.2025 13:11
| 1 | 1 | Jens Falk | # Hosting |
|---|---|---|---|
| 2 | |||
| 3 | |||
| 4 | ## Bestimmte Clients (Bots) blockieren |
||
| 5 | |||
| 6 | Jeder Web-Browser gibt sich mit einer Kennung in der Regel zu erkennen. Auch Bots sollten sich mit einer bestimmten Kennung zu erkennen geben. |
||
| 7 | |||
| 8 | Hier im Beispiel werden der SemrushBot, der MJ12bot, und der AI Bot Claude von Anthropic ausgeschlossen: |
||
| 9 | |||
| 10 | RewriteEngine On |
||
| 11 | RewriteBase / |
||
| 12 | RewriteCond %{HTTP_USER_AGENT} ^.*SemrushBot.*$ [OR] |
||
| 13 | RewriteCond %{HTTP_USER_AGENT} ^.*MJ12bot.*$ [OR] |
||
| 14 | RewriteCond %{HTTP_USER_AGENT} ^.*ClaudeBot.*$ [OR] |
||
| 15 | RewriteCond %{HTTP_USER_AGENT} ^$ RewriteRule ^.* - [F,L] |
||
| 16 | |||
| 17 | Siehe auch https://stackoverflow.com/a/35775449/1632368 |