需要安装一个graphframe
在spark下用用的命令是:
./spark-shell --packages graphframes:graphframes:0.2.0-spark1.6-s_2.10
但是因为网络原因,有个scala-lang_scala-reflect-2.10.4.jar包下的特别慢
最后我想自己在网上下一个,传到安装目录下
搜了半天
最后发现在目录
依赖包的目录是ivy2
下载时候先检查本地目录,本地目录没有去网上下载
~/.ivy2/cache/org.scala-lang/scala-reflect/jars/
自己下好包放到这目录下面,然后就OK了