block SemrushBot which is spamming our logs · dafb337ed1 - fsfe-website - FSFE Git Service

block SemrushBot which is spamming our logs

the build was successful Détails

Parcourir la source

Cette révision appartient à :

Max Mehl

2019-03-06 13:46:52 +01:00

Parent 9fbd60bc1e

révision dafb337ed1

Signé par:

max.mehl

ID de la clé GPG: 2704E4AB371E2E92

1 fichiers modifiés avec 3 ajouts et 0 suppressions

3

robots.txt

Voir le fichier

 @ -1,2 +1,5 @@
 User-agent: *
 Disallow: /source/
 User-agent: SemrushBot
 Disallow: /