码迷,mamicode.com
首页 > 系统相关 > 详细

Spark交互式工具spark-shell

时间:2017-08-24 01:07:14      阅读:160      评论:0      收藏:0      [点我收藏+]

标签:多少   res   技术   img   查看   com   .so   blog   tab   

REPL

技术分享

Spark REPL

 

技术分享

 

Spark shell

技术分享

 

 

 

下面我们启动一下(我这里搭建的是3节点集群)

技术分享

 

 技术分享

技术分享

 技术分享

技术分享

 

 技术分享

技术分享

 

sc.后面按TAB键可以把提示调出来

技术分享

 

 

查看hdfs上文件内容

技术分享

技术分享

技术分享

 

这个数据从这里下载的 https://www.sogou.com/labs/resource/q.php

技术分享

 

 

 试下读下里面的数据

技术分享

 

 

这个可以求出有多少行

 技术分享

技术分享

 

Spark交互式工具spark-shell

标签:多少   res   技术   img   查看   com   .so   blog   tab   

原文地址:http://www.cnblogs.com/braveym/p/7420882.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!