Wilt u leren hoe u een Apache Hadoop installatie op Ubuntu Linux te doen? In deze tutorial laten we je zien hoe je Apache Hadoop downloaden en installeren op een computer met Ubuntu Linux.
• Ubuntu 18.04
• Ubuntu 19.04
• Ubuntu 19.10
• Apache Hadoop 3.1.3
• Openjdk versie 11.0.4
Hardwarelijst:
De volgende sectie presenteert de lijst van apparatuur die wordt gebruikt om deze Apache Hadoop tutorial te maken.
Elk stuk hardware hierboven vermeld kan worden gevonden op Amazon website.
Apache Hadoop Gerelateerde Tutorial:
Op deze pagina bieden we snelle toegang tot een lijst met tutorials met betrekking tot Apache Hadoop.
Tutorial - Apache Hadoop Installatie op Ubuntu Linux
Installeer het Java JDK-pakket.
Gebruik de volgende opdracht om de Java JDK-installatiemap te vinden.
Deze opdrachtuitvoer moet u de Java-installatiemap laten zien.
In ons voorbeeld, onze Java JDK is geïnstalleerd onder de map: /usr/lib/jvm/java-11-openjdk-amd64
Nu moet u een omgevingsvariabele maken met de naam JAVA_HOME.
Een bestand maken om de vereiste configuratie van omgevingsvariabelen te automatiseren
Hier is de java.sh bestandsinhoud.
Start de computer opnieuw op.
Gebruik de volgende opdracht om te controleren of de variabele JAVA_HOME is gemaakt.
Hier is de opdrachtuitvoer:
Gebruik de volgende opdracht om de Java-installatie te testen.
Hier is de opdrachtuitvoer:
Maak een lokaal gebruikersaccount met de naam hadoop.
Hier is de opdrachtuitvoer.
Let op het hadoop-gebruikerswachtwoord.
Gebruik de SU comand om de Haddop gebruiker te worden.
Genereer een SSH-sleutel voor het Hadoop-gebruikersaccount.
Hier is de opdrachtuitvoer.
Voeg als gebruiker Haddop de Hadoop-gebruikerssleutel toe aan de lijst met geautoriseerde ssh-sleutels.
U moet het hadoop-gebruikerswachtwoord invoeren.
Hier is de opdrachtuitvoer.
Probeer als het Hadoop-gebruikersaccount in te loggen op de localhost.
Log af van het Hadoop-gebruikersaccount en ga terug naar het root-account.
Download het Hadoop-pakket op de officiële website.
Installeer de Hadoop-software op uw Linux-server.
Nu moet je de Apache Haddop vereiste omgevingsvariabelen maken.
Laten we een bestand maken om de vereiste configuratie van omgevingsvariabelen te automatiseren.
Hier is de hadoop.sh bestandsinhoud.
U moet de JAVA_HOME omgevingsvariabele instellen op het hadoop.sh bestand.
Bewerk het hadoop-env.sh bestand.
Voeg de volgende regel toe aan het einde van dit bestand.
Start de computer opnieuw op.
Gebruik de volgende opdracht om te controleren of de Apache Hadoop-omgevingsvariabelen zijn gemaakt.
Hier is de opdrachtuitvoer:
Controleer de geïnstalleerde Apache Hadoop-versie.
Hier is de opdrachtuitvoer.
De Apache Hadoop software installatie werd voltooid.
Zelfstudie - Apache Hadoop Configuration Voorbeeld
In ons voorbeeld gaan we een Apache Hadoop single node cluster setup configureren.
Bewerk het bestand core-site.xml.
Hier is het originele bestand, vóór onze configuratie.
Hier is het nieuwe bestand met onze configuratie.
Bewerk het bestand hdfs-site.xml.
Hier is het originele bestand, vóór onze configuratie.
Hier is het nieuwe bestand met onze configuratie.
Bewerk het mapred-site.xml-bestand.
Hier is het originele bestand, vóór onze configuratie.
Hier is het nieuwe bestand met onze configuratie.
Bewerk het bestand yarn-site.xml.
Hier is het originele bestand, vóór onze configuratie.
Hier is het nieuwe bestand met onze configuratie.
Maak de vereiste mappen met de naam namednode en datanode.
Gebruik de volgende opdracht om de naamnode op te maken.
Gebruik de volgende opdracht om uw Apache Hadoop-cluster te starten.
Gebruik de volgende opdracht om uw Apache Hadoop-cluster te starten.
Open een browsersoftware, voer het IP-adres van uw Apache Hadoop-server in plus :9870
In ons voorbeeld is de volgende URL ingevoerd in de browser:
• http://192.168.15.10:9870
De Apache Hadoop web interface moet worden gepresenteerd.
Gefeliciteerd! Je bent klaar met de Apache Hadoop installatie op Ubuntu Linux.