Cloudera Hadoop Class file per org.apache.hadoop.classification.InterfaceAudience non trovato

Question

Ecco l'errore che si ottiene quando si tenta di compilare questo file WordCount.java.

$javac -classpath /usr/lib/hadoop/hadoop-common-2.0.0-cdh4.0.1.jar:/usr/lib/hadoop/client/hadoop-mapreduce-client-core-2.0.0-cdh4.0.1.jar -d ~/wordcount /usr/lib/hadoop/wordcount_classes/WordCount.java 
/usr/lib/hadoop/hadoop-common-2.0.0-cdh4.0.1.jar(org/apache/hadoop/fs/Path.class): 

warning: Cannot find annotation method 'value()' in type 'LimitedPrivate': class file for org.apache.hadoop.classification.InterfaceAudience not found 
1 warning 

Answer 1

Aggiungere hadoop-annotations-2.0.0-cdh4.0.1.jar al classpath

Answer 2

passi come ho risolto questo problema:

1. ho creato una directory chiamata wordcount (/home/cloudera/wordcount).
2. Aggiunto WordCount.java a /home/cloudera/wordcount directory.

3. All'interno della directory ho eseguito il seguente comando:

   javac \ 
   -cp /usr/lib/hadoop/\*:/usr/lib/hadoop/client-0.20/\*:/usr/lib/hadoop/lib/\* \ 
   WordCount.java 
   -d /home/cloudera/wordcount/wordcount_classes 
   

Answer 3

Per la versione 2.6.0 Hadoop è necessario aggiungere i seguenti vasi:

javac -classpath $ HADOOP_HOME/share/Hadoop /common/hadoop-common-2.6.0.jar:$HADOOP_HOME/share/hadoop/common/lib/hadoop-annotations-2.6.0.jar:$HADOOP_HOME/share/hadoop/mapreduce/hadoop-mapreduce-client-core -2.6.0.jar /path_to_your_java_file/WordCount.java

Answer 4

Un veloce (ma non consigliabile per la produzione) in Hadoop-2.6.x è

Unix/MacOS

$ javac -classpath .:$(mapred classpath):$CLASSPATH -d ~/wordcount /usr/lib/hadoop/wordcount_classes/WordCount.java 

Answer 5

Commento sotto la dipendenza dal pom se lo avete

<dependency> 
     <groupId>org.apache.hive</groupId> 
     <artifactId>hive-exec</artifactId> 
     <version>1.2.1</version> 
    </dependency> 

E quindi abilitare annotazioni hadoop