Souhaitez-vous apprendre à configurer le serveur Apache pour refuser l’accès aux mauvais Bots et Crawlers ? Dans ce tutoriel, nous allons configurer le serveur Apache pour bloquer l’accès des mauvais bots et crawlers.
• Ubuntu 20
• Ubuntu 19
• Ubuntu 18
• Apache 2.4.41
Dans notre exemple, le serveur Apache héberge le site WWW.GAMEKING.TIPS.
Copyright © 2018-2021 par Techexpert.tips.
Tous droits réservés. Aucune partie de cette publication ne peut être reproduite, distribuée ou transmise sous quelque forme ou par quelque moyen que ce soit sans l’autorisation écrite préalable de l’éditeur.
Liste des équipements
La section suivante présente la liste des équipements utilisés pour créer ce didacticiel.
En tant qu’associé Amazon, je gagne des achats admissibles.
Apache – Tutoriel connexe:
Sur cette page, nous offrons un accès rapide à une liste de tutoriels liés à Apache.
Tutoriel Apache – Blocage des mauvais bots et crawlers
Recherchez dans le fichier journal Apache une liste d’agents utilisateur.
Une liste d’utilisateurs-agents suspects ayant accé à votre site Web sera affichée.
Créez une liste d’agents utilisateur à bloquer.
En option, ce projet GitHub offre une liste de mauvais bots et crawlers.
Activez les modules Apache requis.
Modifiez le fichier de configuration Apache pour le site Web par défaut.
Ajoutez les lignes suivantes à ce fichier de configuration.
Modifiez les valeurs USER-AGENT pour refléter vos besoins.
Voici le fichier, avant notre configuration.
Voici le fichier, après notre configuration.
Redémarrez le service Apache.
Dans notre exemple, le serveur Apache interdra l’accès à une liste de Bots et crawlers sélectionnés par l’administrateur.
À partir d’un ordinateur Linux distant, testez votre configuration.
Voici la sortie de commande.
Le serveur Apache interdiquera l’accès à partir de valeurs UTILISATEUR-AGENT spécifiques.
À partir d’un ordinateur Linux distant, essayez d’effectuer l’accès en utilisant n’importe quelle autre valeur USER-AGENT.
Voici la sortie de commande.
Le serveur Apache permettra à toute autre valeur USER-AGENT d’accéder à votre site Web.
Félicitations! Vous avez appris à configurer le serveur Apache pour refuser l’accès aux mauvais Bots et Crawlers.
