Come configurare hbase in spark?

Question

Quali sono i passaggi per collegare spark a hbase?

Ho gli indirizzi principali per entrambi. Devo semplicemente aggiungere l'indirizzo di hbase in spark classpath?

Answer 1

Questo post su come collegare gli elettrodi con HBase dovrebbe essere utile: http://www.vidyasource.com/blog/Programming/Scala/Java/Data/Hadoop/Analytics/2014/01/25/lighting-a-spark-with-hbase

Do I just add the hbase address into spark classpath?

No. In realtà, si dovrebbe mettere i file HBase configuraion nel classpath scintilla. In caso contrario, dovresti impostarli nei tuoi codici, ad esempio:

Configuration hConf = HBaseConfiguration.create(conf); 
    hConf.set("hbase.zookeeper.quorum", "PDHadoop1.corp.CompanyName.com,PDHadoop2.corp.CompanyName.com"); 
    hConf.setInt("hbase.zookeeper.property.clientPort", 10000);