Please disable your adblock and script blockers to view this page
Connect with us

Linux

Come installare Hadoop Single Node Cluster (Pseudonode) su CentOS 7

Hadoop è un framework open source ampiamente utilizzato per gestire Bigdata. La maggior parte della Bigdata / Analisi dei dati progetti vengono costruiti in aggiunta a Ecosistema Hadoop. Consiste di due strati, uno è per Archiviazione dei dati e un altro è per Elaborazione dei dati.

Conservazione sarà curato dal proprio filesystem chiamato HDFS (File system distribuito Hadoop) e in lavorazione sarà curato da FILATO (Ancora un altro negoziatore di risorse). Riduci mappa è il motore di elaborazione predefinito di Ecosistema Hadoop.

Questo articolo descrive il processo per installare il Pseudonodo installazione di Hadoop, dove tutti i file demoni (JVM) verrà eseguito Nodo singolo Cluster attivo CentOS 7.

Questo è principalmente per i principianti che imparano Hadoop. In tempo reale, Hadoop verrà installato come un cluster multinodo dove i dati verranno distribuiti tra i server come blocchi e il lavoro verrà eseguito in modo parallelo.

Prerequisiti

Installazione di Java su CentOS 7

1. Hadoop è un Ecosistema di cui si compone Giava. Abbiamo bisogno Giava installato nel nostro sistema obbligatoriamente da installare Hadoop.

# yum install java-1.8.0-openjdk

 

2. Quindi, verifica la versione installata di Giava sul sistema.

# java -version
verifica la versione di Java
verifica la versione di Java

Configurare l’accesso senza password su CentOS 7

Dobbiamo avere ssh configurato nella nostra macchina, Hadoop gestirà i nodi con l’uso di SSH. Usi del nodo principale SSH connessione per collegare i suoi nodi slave ed eseguire operazioni come avvio e arresto.

Abbiamo bisogno di impostare ssh senza password in modo che il master possa comunicare con gli slave usando ssh senza password. Altrimenti per ogni stabilimento di connessione, è necessario inserire la password.

3. Configurare un accesso SSH senza password utilizzando i seguenti comandi sul server.

# ssh-keygen
# ssh-copy-id -i localhost
Crea SSH Keygen in CentOS 7
Crea SSH Keygen in CentOS 7
Copia la chiave SSH su CentOS 7
Copia la chiave SSH su CentOS 7

4. Dopo aver configurato l’accesso SSH senza password, prova ad accedere di nuovo, sarai connesso senza password.

# ssh localhost
Accesso SSH senza password a CentOS 7
Accesso SSH senza password a CentOS 7

Installazione di Hadoop in CentOS 7

Devi eseguire l'accesso per continuare a leggere l'articolo. Si prega di Accedere. Non sei un membro? Registrati

Click to comment

Leave a Reply

Esegui l'accesso per Commentare

Di tendenza