Wilt u weten hoe u de Apache-server configureert om toegang tot slechte bots en crawlers te weigeren? In deze zelfstudie gaan we de Apache-server configureren om de toegang van slechte bots en crawlers te blokkeren.
• Ubuntu 20
• Ubuntu 19
• Ubuntu 18
• Apache 2.4.41
In ons voorbeeld host de Apache server de website WWW.GAMEKING.TIPS.
Copyright © 2018-2021 door Techexpert.tips.
Alle rechten voorbehouden. Niets uit deze publicatie mag worden gereproduceerd, verspreid of verzonden in welke vorm of op welke wijze dan ook zonder voorafgaande schriftelijke toestemming van de uitgever.
Uitrustingslijst
In de volgende sectie wordt de lijst weergegeven met apparatuur die wordt gebruikt om deze zelfstudie te maken.
Als Amazon Associate verdien ik aan kwalificerende aankopen.
Apache – Gerelateerde zelfstudie:
Op deze pagina bieden we snelle toegang tot een lijst met tutorials met betrekking tot Apache.
Tutorial Apache – Slechte bots en crawlers blokkeren
Zoek in het Apache-logboekbestand naar een lijst met gebruikersagenten.
Er wordt een lijst weergegeven met verdachte gebruikersagenten die uw website hebben geopend.
Maak een lijst met gebruikersagenten die u wilt blokkeren.
Optioneel biedt dit GitHub-project een lijst met slechte bots en crawlers.
Schakel de vereiste Apache-modules in.
Bewerk het Apache-configuratiebestand voor de standaardwebsite.
Voeg de volgende regels toe aan dit configuratiebestand.
Wijzig de USER-AGENT-waarden om aan uw behoeften te voldoen.
Hier is het bestand, voor onze configuratie.
Hier is het bestand, na onze configuratie.
Start de Apache-service opnieuw.
In ons voorbeeld verbiedt de Apache-server toegang tot een lijst met bots en crawlers die door de beheerder zijn geselecteerd.
Test vanaf een externe Linux-computer uw configuratie.
Hier is de opdrachtuitvoer.
De Apache-server verbiedt toegang tot specifieke USER-AGENT-waarden.
Probeer vanaf een externe Linux-computer toegang uit te voeren met behulp van een andere USER-AGENT-waarde.
Hier is de opdrachtuitvoer.
De Apache-server geeft elke andere USER-AGENT-waarde toegang tot uw website.
Heilwens! Je hebt geleerd hoe je de Apache-server configureert om toegang tot slechte bots en crawlers te weigeren.