初学spark问题一：无法初始化scala编译器_听风铃的声音

http://blog.sina.com.cn/u/1505926637

首页博文目录关于我

个人资料

微博

加好友发纸条

写留言加关注

博客等级：
博客积分：

博客访问：
关注人气：
获赠金笔：0支
赠出金笔：0支
荣誉徽章：

正文字体大小：大中小

初学spark问题一：无法初始化scala编译器

(2014-11-16 11:24:25)

标签：

spark-shell

分类： Spark

最近开始学习spark，在windows上按照官方说明运行命令spark-shell进入到scala版本的spark shell时，出现了下面的问题：

Failed to initialize compiler: object scala.runtime in compiler mirror not found.

** Note that as of 2.8 scala does not assume use of the java classpath.

** For the old behavior pass -usejavacp to scala, or if using a Setting

** object programatically, settings.usejavacp.value = true.

具体运行结果如下图：

http://s8/mw690/001DUIjjzy6NEtQv5RR47&690

出现这个问题的原因是2.8版本以上的scala将不再默认使用java的classpath.要解决这个问题，很显然，就是要在配置文件中添加使用java classpath的命令。

上网google方法后，终于找到完整可行的解决方案：

修改\bin\spark-class2.cmd文件下的内容(即添加下图中红色部分内容)

http://s12/mw690/001DUIjjzy6NEuo3IlJ1b&690

保存后，在cmd上运行bin\spark-shell命令，便可切换到scala版本下的shell

http://s15/mw690/001DUIjjzy6NEuTJS2y3e&690

值得一提的是，spark1.1.0版本发行包内的bin下包含很多个calss配置文件，如spark-class、spark-class.cmd、spark-class2.cmd，这3个文件内容不同。我曾尝试在其他两个文件中采用解决方案，但都无效。而至于为什么解决方案需要应用在spark-class2.cmd以及这3个文件到底实现怎样的功能又或者有怎样的联系，有待进一步的研究。

注：上文提到的解决方案，来自http://my.oschina.net/sulliy/blog/217212

阅读┊ 收藏 ┊ 喜欢 ▼ ┊打印┊举报/Report

前一篇：Linux时间函数[转]

后一篇：Spark快速入门之单机模式Java应用程序开发

新浪BLOG意见反馈留言板　欢迎批评指正