Spark是用Scala语言写的，所以要先把Scala学好，Scala的安装很简单：1、下载Scala:http://www.scala-lang.org/download/2、下载下来的是msi安装包，直接安装即可，安装过程中会自动帮你更新系统环境变量PATH，所以安装后无需使设置任何环境变量便可...
分类：
其他好文 时间：
2015-09-21 19:22:42
阅读次数：
118
hadoop2的安装教程Spark可以直接安装在hadoop2上面，主要是安装在hadoop2的yarn框架上面安装Spark之前需要在每台机器上安装Scala,根据你下载的Spark版本，选择对应的Scala和jdkScala的安装就是解压缩，然后配置环境变量，将Scala的执行命令配置到Path...
分类：
其他好文 时间：
2015-09-20 17:31:56
阅读次数：
152
SBT的Console是交互的，能打包编译工程。DT大数据梦工厂微信公众账号：DT_Spark。DT大数据梦工厂的微信公众号是DT_Spark，每天都会有大数据实战视频发布，请您持续学习。王家林DT大数据梦工厂scala的所有视频、PPT和代码在百度云盘的链接:http://pan.baidu.com/share/home?uk=4..
分类：
编程语言 时间：
2015-09-12 08:30:20
阅读次数：
267
akka提供了可伸缩的实时事务处理功能。akka基于actor,并提供了位置透明。1GB的heap可以有2500000个actor。水平扩展，垂直扩展，容错3个方面的解决方式。树形结构的actor,每个actor都有状态和行为。DT大数据梦工厂微信公众账号：DT_Spark。DT大数据梦工厂的微信公众号是DT_Spark..
分类：
其他好文 时间：
2015-09-12 00:59:22
阅读次数：
253
对3个actor(MapActor、ReduceActor、AggregateActor)通讯的讲解。DT大数据梦工厂微信公众账号：DT_Spark。DT大数据梦工厂的微信公众号是DT_Spark，每天都会有大数据实战视频发布，请您持续学习。王家林DT大数据梦工厂scala的所有视频、PPT和代码在百度云盘的链接:http://pan.ba..
分类：
其他好文 时间：
2015-09-12 00:54:57
阅读次数：
332
构建map,reduce之间通讯的消息实体类。了解wordcount原理。DT大数据梦工厂微信公众账号：DT_Spark。DT大数据梦工厂的微信公众号是DT_Spark，每天都会有大数据实战视频发布，请您持续学习。王家林DT大数据梦工厂scala的所有视频、PPT和代码在百度云盘的链接:http://pan.baidu.co..
分类：
其他好文 时间：
2015-09-12 00:54:46
阅读次数：
268
MasterActor初始化MapActor,ReduceActor,AggregateActor的方式。DT大数据梦工厂微信公众账号：DT_Spark。DT大数据梦工厂的微信公众号是DT_Spark，每天都会有大数据实战视频发布，请您持续学习。王家林DT大数据梦工厂scala的所有视频、PPT和代码在百度云盘的链接:http://pan.bai..
分类：
其他好文 时间：
2015-09-12 00:54:14
阅读次数：
172
在scala中，Range代表的是一段整数的范围，官方有关range的api： http://www.scala-lang.org/api/current/index.html#scala.collection.immutable.Range var r = 1 to 10;//赋值1到10的整数?? var r = 1.to(10)...
分类：
其他好文 时间：
2015-09-10 16:08:07
阅读次数：
158
今天学习了scala的多重界定T >: A :A with BA或B是T的子类T <% A <% BT同时满足能够即可以通过隐式转换转变为A的类型，也可以通过隐式转换变为B的类型。T : A : BT必须同时满足存在A[T]这种类型的隐式值和B[T]类型的隐式值。分享下更多的scala资源吧：百度云...
分类：
其他好文 时间：
2015-09-08 21:56:26
阅读次数：
145
今天学习了scala的界定，先来看看下面这段代码//class Pair[T] (val first : T,val second : T)class Pair[T 0) first else second}class Pair_Lower_Bound[T](val first : T,val s....
分类：
其他好文 时间：
2015-09-04 18:35:13
阅读次数：
149
