GraphX编译

编译版本为spark-1.5.0

由于机房机器不允许连外网进行下载编译，在本机上面安装了cygwin, maven, 修改maven的仓库位置使其放在D盘.

试了下sbt, 发现坑太多(防火墙问题，很多jar下不到,代理同样被学校的封死... )，由于这里只是轻微改动GraphX以便测试性能，因此直接使用spark源码目录下的make-distribution.sh来编译。当然直接使用mvn编译也可以。

./make-distribution.sh

注意，这里一开始指定-Dhadoop.version=1.2.1 结果死活说下不到hadoop-client-1.2.1.jar包，我手动下载放到repoisty里也没用，默认编译生成的jar包在spark-1.5.0\assembly\target\scala-2.10 下：

spark-assembly-1.5.0-hadoop2.2.0.jar

我安装的hadoop1.2.1, 被迫只能将其解压，将其中的改进后的Pregel.class文件替换原有的spark-assembly-1.5.0-hadoop1.2.1总的对应文件，再压缩spark-assembly-1.5.0-hadoop1.2.1目录, 命令:

进入spark-assembly-1.5.0-hadoop1.2.1目录(cygwin模式)

jar cvfspark-assembly-1.5.0-hadoop1.2.1.jar ./*

替换集群中的Spark目录的下lib中的spark-assembly-1.5.0-hadoop1.2.1.jar，测试，oK!