Vil du lære å gjøre en Apache Hadoop-installasjon på Ubuntu Linux? I denne opplæringen skal vi vise deg hvordan du laster ned og installerer Apache Hadoop på en datamaskin som kjører Ubuntu Linux.

• Ubuntu 18.04
• Ubuntu 19.04
• Ubuntu 19.10
• Apache Hadoop 3.1.3
• Openjdk version 11.0.4

Maskinvareliste:

Følgende avsnitt presenterer listen over utstyr som brukes til å lage denne Apache Hadoop opplæringen.

Hver del av maskinvaren som er nevnt ovenfor, finner du på Amazons nettside.

Apache Hadoop Relaterte Tutorial:

På denne siden tilbyr vi rask tilgang til en liste over tutorials knyttet til Apache Hadoop.

Tutorial – Apache Hadoop Installasjon på Ubuntu Linux

Installer Java JDK-pakken.

Copy to Clipboard

Bruk følgende kommando til å finne java JDK installasjonskatalogen.

Copy to Clipboard

Denne kommandoutdataene skal vise deg Java-installasjonskatalogen.

Copy to Clipboard

I vårt eksempel er vår Java JDK installert under mappen: /usr/lib/jvm/java-11-openjdk-amd64

Nå må du opprette en miljøvariabel med navnet JAVA_HOME.

La oss opprette en fil for å automatisere den nødvendige konfigurasjonen av miljøvariabler

Copy to Clipboard

Her er java.sh filinnholdet.

Copy to Clipboard

Start datamaskinen på nytt.

Copy to Clipboard

Bruk følgende kommando til å kontrollere om JAVA_HOME ble opprettet.

Copy to Clipboard

Her er kommandoutdataene:

Copy to Clipboard

Bruk følgende kommando til å teste Java-installasjonen.

Copy to Clipboard

Her er kommandoutdataene:

Copy to Clipboard

Opprett en lokal brukerkonto med navnet hadoop.

Copy to Clipboard

Her er kommandoutdataene.

Legg merke til Hadoop-brukerpassordet.

Copy to Clipboard

Bruk SU-komand til å bli Haddop-brukeren.

Generer en SSH-nøkkel til Hadoop-brukerkontoen.

Copy to Clipboard

Her er kommandoutdataene.

Copy to Clipboard

Som bruker Haddop, legge til Hadoop brukernøkkelen til listen over autoriserte ssh nøkler.

Du må skrive inn Hadoop-brukerpassordet.

Copy to Clipboard

Her er kommandoutdataene.

Copy to Clipboard

Som Hadoop brukerkonto, prøv å logge inn på localhost.

Copy to Clipboard

Logg av fra Hadoop-brukerkontoen og gå tilbake til rotkontoen.

Copy to Clipboard

Last ned Hadoop-pakken fra den offisielle nettsiden.

Copy to Clipboard

Installer Hadoop-programvaren på Linux-serveren din.

Copy to Clipboard

Nå må du opprette Apache Haddop nødvendige miljøvariabler.

La oss opprette en fil for å automatisere den nødvendige konfigurasjonen av miljøvariabler.

Copy to Clipboard

Her er hadoop.sh filinnholdet.

Copy to Clipboard

Du må angi JAVA_HOME for miljøvariabelen på hadoop.sh filen.

Rediger hadoop-env.sh filen.

Copy to Clipboard

Legg til følgende linje på slutten av denne filen.

Copy to Clipboard

Start datamaskinen på nytt.

Copy to Clipboard

Bruk følgende kommando til å kontrollere om Apache Hadoop-miljøvariablene ble opprettet.

Copy to Clipboard

Her er kommandoutdataene:

Copy to Clipboard

Kontroller Apache Hadoop-versjonen installert.

Copy to Clipboard

Her er kommandoutdataene.

Copy to Clipboard

Apache Hadoop-programvareinstallasjonen ble fullført.

Tutorial – Apache Hadoop Konfigurasjon Eksempel

I vårt eksempel skal vi konfigurere et Apache Hadoop enkelt nodeklyngeoppsett.

Rediger core-site.xml-filen.

Copy to Clipboard

Her er den opprinnelige filen, før vår konfigurasjon.

Copy to Clipboard

Her er den nye filen med vår konfigurasjon.

Copy to Clipboard

Rediger filen hdfs-site.xml.

Copy to Clipboard

Her er den opprinnelige filen, før vår konfigurasjon.

Copy to Clipboard

Her er den nye filen med vår konfigurasjon.

Copy to Clipboard

Rediger filen mapred-site.xml.

Copy to Clipboard

Her er den opprinnelige filen, før vår konfigurasjon.

Copy to Clipboard

Her er den nye filen med vår konfigurasjon.

Copy to Clipboard

Rediger filen yarn-site.xml.

Copy to Clipboard

Her er den opprinnelige filen, før vår konfigurasjon.

Copy to Clipboard

Her er den nye filen med vår konfigurasjon.

Copy to Clipboard

Opprett de nødvendige katalogene kalt namenode og datanode.

Copy to Clipboard

Bruk følgende kommando til å formatere namenode.

Copy to Clipboard

Bruk følgende kommando for å starte Apache Hadoop-klyngen.

Copy to Clipboard

Bruk følgende kommando for å starte Apache Hadoop-klyngen.

Copy to Clipboard

Åpne en nettleserprogramvare, skriv inn IP-adressen til Apache Hadoop-serveren pluss:9870

I vårt eksempel ble følgende URL skrevet inn i nettleseren:

• Http://192.168.15.10:9870

Apache Hadoop-webgrensesnittet skal presenteres.

Gratulerer! Du har fullført Apache Hadoop-installasjonen på Ubuntu Linux.