Spark Error: Impossibile inizializzare la classe org.apache.spark.rdd.RDDOperationScope

Question

Ho creato un cluster spark standalone sul mio laptop, quindi vado in una console sbt su un progetto spark e provo ad incorporare un'istanza spark come così:

val conf = new SparkConf().setAppName("foo").setMaster(/* Spark Master URL*/) 
val sc = new SparkContext(conf) 

Fino a lì tutto funziona bene, poi cerco

sc.parallelize(Array(1,2,3)) 
// and I get: java.lang.NoClassDefFoundError: Could not initialize class org.apache.spark.rdd.RDDOperationScope$ 

come posso risolvere questo problema?

Answer 1

forse ti sei perso seguendo lib.

<dependency> 
     <groupId>com.fasterxml.jackson.core</groupId> 
     <artifactId>jackson-databind</artifactId> 
     <version>2.4.4</version> 
    </dependency>