码迷,mamicode.com
首页 > 其他好文 > 详细

spark快速大数据分析学习笔记*初始化sparkcontext(一)

时间:2016-12-13 07:02:00      阅读:200      评论:0      收藏:0      [点我收藏+]

标签:数据   set   java   本地   cal   集群   学习   关闭   集群管理   

初始化SparkContext

1// 在java中初始化spark
2 import org.apache.spark.SparkConf;
3 import org.apache.spark.api.java.JavaSparkContext;
4 
5 SparkConf conf=new SparkConf().setMaster("local”).setAppName("my app");
6 //集群url:本例是运行在本地单机local;应用名,可以在集群管理器用户界面中找到你的应用
7 JavaSparkContext sc=new JavaSparkContext(conf);

关闭spark可以用SparkContext的stop()方法,或直接退出应用,如System.exit(0)或sys.exit()

 

 

 

参考《spark快速大数据分析》

spark快速大数据分析学习笔记*初始化sparkcontext(一)

标签:数据   set   java   本地   cal   集群   学习   关闭   集群管理   

原文地址:http://www.cnblogs.com/little-horse/p/6166411.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!