注册 登录  
 加关注
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

阿弥陀佛

街树飘影未见尘 潭月潜水了无声 般若观照心空静...

 
 
 

日志

 
 
关于我

一直从事气象预报、服务建模实践应用。 注重气象物理场、实况场、地理信息、本体知识库、分布式气象内容管理系统建立。 对Barnes客观分析, 小波,计算神经网络、信任传播、贝叶斯推理、专家系统、网络本体语言有一定体会。 一直使用Java、Delphi、Prolog、SQL编程。

网易考拉推荐

Building Spark with scala 2.10  

2014-12-25 17:05:33|  分类: Spark |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |

参考文献 :
http://spark.apache.org/docs/latest/building-spark.html
git clone https://github.com/apache/spark.git

dev/change-version-to-2.10.sh

export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCacheSize=512m"
mvn -Pyarn -Phadoop-2.4 -Dscala-2.10 -DskipTests clean package
sbt/sbt -Pyarn -Phadoop-2.4 assembly

========================================================================
Finished in 1 ms
[INFO] ------------------------------------------------------------------------
[INFO] Reactor Summary:
[INFO]
[INFO] Spark Project Parent POM .......................... SUCCESS [4.170s]
[INFO] Spark Project Networking .......................... SUCCESS [7.785s]
[INFO] Spark Project Shuffle Streaming Service ........... SUCCESS [5.857s]
[INFO] Spark Project Core ................................ SUCCESS [3:08.596s]
[INFO] Spark Project Bagel ............................... SUCCESS [21.283s]
[INFO] Spark Project GraphX .............................. SUCCESS [5:17.777s]
[INFO] Spark Project Streaming ........................... SUCCESS [1:14.858s]
[INFO] Spark Project Catalyst ............................ SUCCESS [1:51.597s]
[INFO] Spark Project SQL ................................. SUCCESS [3:14.757s]
[INFO] Spark Project ML Library .......................... SUCCESS [8:30.398s]
[INFO] Spark Project Tools ............................... SUCCESS [11.711s]
[INFO] Spark Project Hive ................................ SUCCESS [15:52.181s]
[INFO] Spark Project REPL ................................ SUCCESS [47.790s]
[INFO] Spark Project YARN ................................ SUCCESS [1:14.200s]
[INFO] Spark Project Assembly ............................ SUCCESS [45.601s]
[INFO] Spark Project External Twitter .................... SUCCESS [22.827s]
[INFO] Spark Project External Flume Sink ................. SUCCESS [2:25.962s]
[INFO] Spark Project External Flume ...................... SUCCESS [25.410s]
[INFO] Spark Project External MQTT ....................... SUCCESS [37.619s]
[INFO] Spark Project External ZeroMQ ..................... SUCCESS [2:41.639s]
[INFO] Spark Project External Kafka ...................... SUCCESS [5:10.670s]
[INFO] Spark Project Examples ............................ SUCCESS [5:50.859s]
[INFO] Spark Project YARN Shuffle Service ................ SUCCESS [27.832s]
[INFO] ------------------------------------------------------------------------
[INFO] BUILD SUCCESS
[INFO] ------------------------------------------------------------------------
[INFO] Total time: 1:00:52.107s
[INFO] Finished at: Thu Dec 25 17:27:51 CST 2014
[INFO] Final Memory: 80M/1141M
[INFO] ------------------------------------------------------------------------
  评论这张
 
阅读(349)| 评论(0)
推荐 转载

历史上的今天

在LOFTER的更多文章

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2017