2015-08-30 11 views
11

Ho estratto l'ultima fonte dal repository Spark e creato localmente. Funziona alla grande da una shell interattiva come spark-shell o spark-sql.Come connettere lo Zeppelin a Spark 1.5 costruito dalle sorgenti?

Ora voglio collegare Zeppelin al mio Spark 1.5, secondo this install manual. Ho pubblicato la build Spark personalizzata nel repository maven locale e ho impostato la versione personalizzata di Spark nel comando di costruzione di Zeppelin. Il processo di compilazione terminata con successo, ma quando provo a fare funzionare le cose di base come sc all'interno notebook, getta:

akka.ConfigurationException: Akka versione JAR [2.3.11] non corrisponde la versione di configurazione fornito [2.3.4 ]

versione 2.3.4 si trova in pom.xml e spark/pom.xml, ma semplicemente cambiando loro non sarà nemmeno mi permetta di ottenere una generazione.

Se ricostruisco Zeppelin con lo standard -Dspark.vesion=1.4.1, tutto funziona.

+1

Ciao, vedo che sei nuovo di StackOverflow. Se ritieni che una risposta risolva il problema, contrassegnalo come "accettato" facendo clic sul segno di spunta verde. Ciò aiuta a mantenere l'attenzione su SO meno recenti che non hanno ancora risposte. – bzz

risposta

8

Aggiornamento 2016-01

Spark 1.6 supporto ha landed to master ed è disponibile sotto -Pspark-1.6 profilo.


Aggiornamento 2015-09

Spark 1.5 supporto ha landed to master ed è disponibile sotto -Pspark-1.5 profilo.


lavoro sul sostegno Spark 1.5 in Apache Zeppelin (incubando) è stato fatto sotto questo PR apache/incubator-zeppelin#269, che si presta a padroneggiare al più presto.

Per ora, costruire da Spark_1.5 ramo con -Pspark-1.5 dovrebbe fare il trucco.

Problemi correlati