Vil du lære å gjøre en Apache Hadoop-installasjon på Ubuntu Linux? I denne opplæringen skal vi vise deg hvordan du laster ned og installerer Apache Hadoop på en datamaskin som kjører Ubuntu Linux.
• Ubuntu 18.04
• Ubuntu 19.04
• Ubuntu 19.10
• Apache Hadoop 3.1.3
• Openjdk version 11.0.4
Maskinvareliste:
Følgende avsnitt presenterer listen over utstyr som brukes til å lage denne Apache Hadoop opplæringen.
Hver del av maskinvaren som er nevnt ovenfor, finner du på Amazons nettside.
Apache Hadoop Relaterte Tutorial:
På denne siden tilbyr vi rask tilgang til en liste over tutorials knyttet til Apache Hadoop.
Tutorial - Apache Hadoop Installasjon på Ubuntu Linux
Installer Java JDK-pakken.
Bruk følgende kommando til å finne java JDK installasjonskatalogen.
Denne kommandoutdataene skal vise deg Java-installasjonskatalogen.
I vårt eksempel er vår Java JDK installert under mappen: /usr/lib/jvm/java-11-openjdk-amd64
Nå må du opprette en miljøvariabel med navnet JAVA_HOME.
La oss opprette en fil for å automatisere den nødvendige konfigurasjonen av miljøvariabler
Her er java.sh filinnholdet.
Start datamaskinen på nytt.
Bruk følgende kommando til å kontrollere om JAVA_HOME ble opprettet.
Her er kommandoutdataene:
Bruk følgende kommando til å teste Java-installasjonen.
Her er kommandoutdataene:
Opprett en lokal brukerkonto med navnet hadoop.
Her er kommandoutdataene.
Legg merke til Hadoop-brukerpassordet.
Bruk SU-komand til å bli Haddop-brukeren.
Generer en SSH-nøkkel til Hadoop-brukerkontoen.
Her er kommandoutdataene.
Som bruker Haddop, legge til Hadoop brukernøkkelen til listen over autoriserte ssh nøkler.
Du må skrive inn Hadoop-brukerpassordet.
Her er kommandoutdataene.
Som Hadoop brukerkonto, prøv å logge inn på localhost.
Logg av fra Hadoop-brukerkontoen og gå tilbake til rotkontoen.
Last ned Hadoop-pakken fra den offisielle nettsiden.
Installer Hadoop-programvaren på Linux-serveren din.
Nå må du opprette Apache Haddop nødvendige miljøvariabler.
La oss opprette en fil for å automatisere den nødvendige konfigurasjonen av miljøvariabler.
Her er hadoop.sh filinnholdet.
Du må angi JAVA_HOME for miljøvariabelen på hadoop.sh filen.
Rediger hadoop-env.sh filen.
Legg til følgende linje på slutten av denne filen.
Start datamaskinen på nytt.
Bruk følgende kommando til å kontrollere om Apache Hadoop-miljøvariablene ble opprettet.
Her er kommandoutdataene:
Kontroller Apache Hadoop-versjonen installert.
Her er kommandoutdataene.
Apache Hadoop-programvareinstallasjonen ble fullført.
Tutorial - Apache Hadoop Konfigurasjon Eksempel
I vårt eksempel skal vi konfigurere et Apache Hadoop enkelt nodeklyngeoppsett.
Rediger core-site.xml-filen.
Her er den opprinnelige filen, før vår konfigurasjon.
Her er den nye filen med vår konfigurasjon.
Rediger filen hdfs-site.xml.
Her er den opprinnelige filen, før vår konfigurasjon.
Her er den nye filen med vår konfigurasjon.
Rediger filen mapred-site.xml.
Her er den opprinnelige filen, før vår konfigurasjon.
Her er den nye filen med vår konfigurasjon.
Rediger filen yarn-site.xml.
Her er den opprinnelige filen, før vår konfigurasjon.
Her er den nye filen med vår konfigurasjon.
Opprett de nødvendige katalogene kalt namenode og datanode.
Bruk følgende kommando til å formatere namenode.
Bruk følgende kommando for å starte Apache Hadoop-klyngen.
Bruk følgende kommando for å starte Apache Hadoop-klyngen.
Åpne en nettleserprogramvare, skriv inn IP-adressen til Apache Hadoop-serveren pluss:9870
I vårt eksempel ble følgende URL skrevet inn i nettleseren:
• Http://192.168.15.10:9870
Apache Hadoop-webgrensesnittet skal presenteres.
Gratulerer! Du har fullført Apache Hadoop-installasjonen på Ubuntu Linux.