Vill du lära dig hur du konfigurerar Apache-servern för att neka åtkomst till dåliga robotar och crawlers? I den här självstudien kommer vi att konfigurera Apache-servern för att blockera åtkomsten från dåliga bots och crawlers.

• Ubuntu 20
• Ubuntu 19
• Ubuntu 18
• Apache 2.4.41

I vårt exempel är Apache-servern värd för webbplatsen WWW.GAMEKING.TIPS.

Utrustning lista

I följande avsnitt presenteras listan över utrustning som används för att skapa den här självstudien.

Som en Amazon Associate, jag tjänar från kvalificerade inköp.

Handledning Apache - Blockera dåliga bots och crawlers

Sök i Apache-loggfilen efter en lista över användaragenter.

Copy to Clipboard

En lista över misstänkta användaragenter som har åtkomst till din webbplats visas.

Copy to Clipboard

Skapa en lista över användaragenter som ska blockeras.

Copy to Clipboard

Det här GitHub-projektet kan också ge en lista över dåliga robotar och crawlers.

Aktivera de nödvändiga Apache-modulerna.

Copy to Clipboard

Redigera Apache-konfigurationsfilen för standardwebbplatsen.

Copy to Clipboard

Lägg till följande rader i den här konfigurationsfilen.

Copy to Clipboard

Ändra USER-AGENT-värdena så att de återspeglar dina behov.

Copy to Clipboard

Här är filen, innan vår konfiguration.

Copy to Clipboard

Här är filen, efter vår konfiguration.

Copy to Clipboard

Starta om Apache-tjänsten.

Copy to Clipboard

I vårt exempel förbjuder Apache-servern åtkomst till en lista över robotar och crawlers som valts av administratören.

Testa konfigurationen från en linuxdator på distans.

Copy to Clipboard

Här är kommandot utgång.

Copy to Clipboard

Apache-servern förbjuder åtkomst från specifika USER-AGENT-värden.

Från en fjärrdator på Linux försöker du utföra åtkomst med något annat USER-AGENT-värde.

Copy to Clipboard

Här är kommandot utgång.

Copy to Clipboard

Apache-servern tillåter alla andra USER-AGENT-värden att komma åt din webbplats.

Gratulationen! Du har lärt dig hur du konfigurerar Apache-servern så att den nekas åtkomst till dåliga robotar och crawlers.