我正在尝试在 Scala Spark 中运行来自 Spark 网站 ( http://spark.apache.org/docs/latest/quick-start.html ) 的字数统计示例,但是当我尝试 spark-submit 时出现异常:java.lang.NoClassDefFoundError: scala/runtime/LambdaDeserialize Spark版本为2.0.1,Scala版本为2.12.0

完整的跟踪在这里:http://pastebin.com/LEjRTAy4

示例代码在 spark-shell 上运行良好

请您参考如下方法:

http://spark.apache.org/downloads.html

注意:从 2.0 版开始,Spark 默认使用 Scala 2.11 构建。 Scala 2.10 用户应下载 Spark 源代码包并使用 Scala 2.10 支持进行构建。

使用 scala 2.11.11


评论关闭
IT序号网

微信公众号号:IT虾米 (左侧二维码扫一扫)欢迎添加!