Что вызывает эту ошибку Serialization в Apache Spark 1.4.0 при вызове:
sc.parallelize(strList, 4)
Это исключение:
com.fasterxml.jackson.databind.JsonMappingException:
Could not find creator property with name 'id' (in class org.apache.spark.rdd.RDDOperationScope)
Выброшено из addBeanProps
в Джексон: com.fasterxml.jackson.databind.deser.BeanDeserializerFactory # addBeanProps
RDD - это Seq [String], а #partitions, похоже, не имеет значения (используется 1, 2, 4).
Нет трассировки стека сериализации, так как обычно закрытие рабочего не может быть сериализовано.
Какой еще способ отслеживать это?