What’s new in Spark 1.2.01.2.0 was released on 12/18, 2014在2014年5月30日公布了Spark 1.0 和9月11日公布了Spark1.1.后,Spark 1.2 最终在12月18日公布。作为1.X时代的第三个release,它有什么重要更...
分类:
其他好文 时间:
2015-08-21 12:56:21
阅读次数:
111
主要内容
Intellij IDEA开发环境简介
Intellij IDEA Scala开发环境搭建
Intellij IDEA Spark开发环境搭建
Intellij IDEA常见问题及解决方案
Intellij IDEA常用快捷键
1. Intellij IDEA开发环境简介具体介绍请参见:http://baike.baidu.com/link?url=SBY93H3SPkmcmIOmZ8H6...
分类:
其他好文 时间:
2015-08-20 17:01:39
阅读次数:
110
Hive是一个基于Hadoop的开源数据仓库工具,用于存储和处理海量结构化数据。它是Facebook 2008年8月开源的一个数据仓库框架,提供了类似于SQL语法的HQL语句作为数据访问接口。...
分类:
其他好文 时间:
2015-08-20 10:41:59
阅读次数:
154
学习了基于Scala的Actor之上的分布式并发消息驱动框架Akka初体验,应用actor模型,位置透明,做到高并发、可伸缩、容错、单机也可以用,水平扩展、垂直扩展、容错都有很好的表现,spark中的例子如下:private def initializeEventProcessActor(){ im...
分类:
其他好文 时间:
2015-08-20 10:18:50
阅读次数:
563
【注】该系列文章以及使用到安装包/测试数据 可以在《倾情大奉送--Spark入门实战系列》获取1、Hive介绍1.1Hive介绍Hive是一个基于Hadoop的开源数据仓库工具,用于存储和处理海量结构化数据。它是Facebook 2008年8月开源的一个数据仓库框架,提供了类似于SQL语法的HQL语...
分类:
其他好文 时间:
2015-08-20 09:10:11
阅读次数:
134
介绍Cacti是一套基于PHP,MySQL,SNMP及RRDTool开发的网络流量监测图形分析工具。Cacti是通过 snmpget来获取数据,使用 RRDtool绘画图形。它提供了非常强大的数据和用户管理功能,可以指定每一个用户能查看树状结构、host以及任何一张图,还可以与LDAP结合进行用户验...
分类:
其他好文 时间:
2015-08-20 06:44:29
阅读次数:
256
王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U...
分类:
其他好文 时间:
2015-08-19 22:39:54
阅读次数:
100
课程内容
Spark修炼之道(基础篇)——Linux基础(15讲)、Akka分布式编程(8讲)
Spark修炼之道(进阶篇)——Spark入门到精通(30讲)
Spark修炼之道(实战篇)——Spark应用开发实战篇(20讲)
Spark修炼之道(高级篇)——Spark源码解析(50讲)
部分内容会在实际编写时动态调整,或补充、或删除。Spark修炼之道(基础篇)——Linux大数据开发基础(15讲...
分类:
其他好文 时间:
2015-08-19 20:25:26
阅读次数:
720
首发:个人博客必须说明:smack最新的4.1.1,相对之前版本变化很大,而且资料缺乏,官方文档也不好,所以还是用老版本3.2.2吧。这篇博文中的代码是4.1.1版的,但不推荐用它。用openfire做服务器,用spark做帮助调试的客户端,用smack(官方文档在这里,感觉写得非常不好)做java...
分类:
系统相关 时间:
2015-08-19 19:54:46
阅读次数:
5170
首发:个人博客 必须说明:smack最新的4.1.1,相对之前版本变化很大,而且资料缺乏,官方文档也不好,所以还是用老版本3.2.2吧。这篇博文中的代码是4.1.1版的,但不推荐用它。 用openfire做服务器,用spark做帮助...
分类:
系统相关 时间:
2015-08-19 17:53:18
阅读次数:
171