Hadoop - il namenode non si avvia

Sto tentando di eseguire hadoop come utente root, ho eseguito il comando di formato namenode hadoop namenode -format quando il file system Hadoop è in esecuzione.Hadoop - il namenode non si avvia

Dopo questo, quando provo ad avviare il server del nodo nome, mostra l'errore come qui di seguito

13/05/23 04:11:37 ERROR namenode.FSNamesystem: FSNamesystem initialization failed. 
java.io.IOException: NameNode is not formatted. 
     at org.apache.hadoop.hdfs.server.namenode.FSImage.recoverTransitionRead(FSImage.java:330) 
     at org.apache.hadoop.hdfs.server.namenode.FSDirectory.loadFSImage(FSDirectory.java:100) 
     at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.initialize(FSNamesystem.java:411)

Ho provato a cercare una soluzione, ma non riesce a trovare alcuna soluzione chiara.

Qualcuno può suggerire?

Grazie.

fonte

2013-05-23 balanv

Hai fissato i tuoi demoni HDFS. Guarda qui potrebbe aiutare http://blog.abhinavmathur.net/2013/01/experience-with-setting-multinode.html – abhinav

Grazie Abhinav .. Il tuo link mi ha dato le risposte .. – balanv

perché dovresti formattare HDFS mentre i demoni sono in esecuzione ?? – Tariq

Cool, ho trovato la soluzione.

Arrestare tutti i server in esecuzione

1) stop-all.sh

Modificare il file /usr/local/hadoop/conf/hdfs-site.xml e aggiungere sotto la configurazione se manca

<property> 
    <name>dfs.data.dir</name> 
    <value>/app/hadoop/tmp/dfs/name/data</value> 
    <final>true</final> 
    </property> 
    <property> 
    <name>dfs.name.dir</name> 
    <value>/app/hadoop/tmp/dfs/name</value> 
    <final>true</final> 
</property>

di inizio sia HDFS e MapReduce Demoni

2) start-dfs.sh 
3) start-mapred.sh

Quindi ora eseguire il il resto dei passaggi per eseguire la mappa riduce il campione indicato in this link

Nota: Si dovrebbe eseguire il comando bin/start-all.sh se il comando diretto non è in esecuzione.

fonte

2013-05-23 13:19:56 balanv

come promemoria, il namenode era necessario per essere formattato per me. 'bin/hadoop namenode -format' – erencan

Sì. possiamo usare il comando 'hadoop namenode -format -force' nel caso in cui dovessimo affrontare qualsiasi problema con solo' hadoop namenode -format' – balanv

formato hdf quando stop del nome del nodo. (Proprio come la risposta superiore).

Aggiungo qualche altro dettaglio.

Il comando FORMAT controllerà o creerà percorso/dfs/nome e lo inizializzerà o reinizializzerà. quindi eseguire start-dfs.sh dovrebbe eseguire namenode, datanode, quindi namesecondary. quando il controllo del nome del nodo non esiste percorso/dfs/nome o non inizializza, si verifica un errore fatale, quindi esce. ecco perché il namenode non si avvia.

maggiori dettagli è possibile controllare HADOOP_COMMON/logs/XXX.namenode.log

fonte

2014-02-16 15:20:41 liuyang1

DFS deve essere formattato. Basta emettere il seguente comando dopo aver fermato tutto e quindi riavviato.

hadoop namenode -format

fonte

2014-08-11 18:46:28 redTiger

hdfs namenode -format usalo in hadoop2.6 – Koitoer

hdfs-site.xml il vostro valore è sbagliato. Hai inserito la cartella sbagliata, ecco perché non sta iniziando il nodo del nome.

fonte

2014-08-18 17:57:33 user3953713

Prima mkdir [cartella], quindi impostare HDFS-site.xml poi formato

fonte

2016-03-30 07:26:42 mcolak

assicurarsi che la directory di nome (dfs.name.dir) e dati delle cartelle (dfs.data.dir) sia elencato correttamente in hdfs-site.xml

fonte

2016-12-26 20:18:22

Assicurati che la directory che hai specificato per il tuo namenode sia completamente vuota. Qualcosa come una cartella "lost + found" in detta directory attiverà questo errore.

fonte

2017-06-18 21:19:18 Eddie

Hadoop - il namenode non si avvia

risposta

Problemi correlati