工欲善其事，必先利其器。学习Scala也是如此，在开始学Scala之前必须要完成Scala的安装以及选择合适的IDE本文主要分为两个部分：1.Scala2.11.6的安装及REPL的使用2.Scala Eclipse插件的安装及使用1.Scala2.11.6安装及REPL的使用本节主要介绍Scala...
分类：
系统相关 时间：
2015-04-10 12:52:46
阅读次数：
212
报错信息 ：
java.lang.IllegalArgumentException: GiniAggregator given label 2.0 but requires label
在用mllib做分类，当用到一些分类算法时，常常需要加入基尼系数。
程序代码：RandomForest.trainClassifier(validData,2,Map[In...
分类：
编程语言 时间：
2015-04-09 21:54:31
阅读次数：
203
语法： Dcl ::= ?def? FunDcl FunDcl ::= FunSig : Type Def ::= ?def? FunDef FunDef ::= FunSig [?:? Type] ?=? Expr FunSig ::= id [FunTypeParamClause] ParamClauses FunTypeParamClause ::= ?[? ...
分类：
其他好文 时间：
2015-04-09 15:40:42
阅读次数：
112
语法：
Dcl ::= ?def? FunDcl
FunDcl ::= FunSig : Type
Def ::= ?def? FunDef
FunDef ::= FunSig [?:? Type] ?=? Expr
FunSig ::= id [FunTypeParamClause] ParamClauses
FunTypeParamClause ::= ?[? TypeParam ...
分类：
其他好文 时间：
2015-04-09 15:32:41
阅读次数：
137
以下类型并不表示值的集合，也并不显式地出现在程序中。它们只以已定义标识符的内部类型而引入。 方法类型 方法类型在内部表示为(Ts)U，(Ts)是一个类型序列(T1,...,Tn) n>=0，U是一个(值或者方法)类型。这个类型表...
分类：
其他好文 时间：
2015-04-09 12:19:24
阅读次数：
142
以下类型并不表示值的集合，也并不显式地出现在程序中。它们只以已定义标识符的内部类型而引入。
方法类型
方法类型在内部表示为(Ts)U，(Ts)是一个类型序列(T1,...,Tn) n>=0，U是一个(值或者方法)类型。这个类型表示一个命名的方法，其参数的类型是T1,...,Tn，返回结果的类型是U。
方法类型是右结合的，(Ts1)(Ts2)U被处理的方式是(Ts1)((Ts2)U)。 ...
分类：
其他好文 时间：
2015-04-09 11:59:44
阅读次数：
112
基本环境：我是在win7环境下，spark1.0.2，HBase0.9.6.1 使用工具：IDEA14.1， scala 2.11.6， sbt。我现在是测试环境使用的是单节点1、使用IDEA创建一个sbt的工程后，在build.sbt文件加入配置文件libraryDependencies += ....
分类：
其他好文 时间：
2015-04-08 13:07:52
阅读次数：
208
这个包主要是与Kafka度量相关的。一、KafkaTimer.scala对代码块的运行进行计时。仅提供一个方法: timer——在运行传入函数f的同时为期计时二、KafkaMetricsConfig.scala指定reporter类，以逗号分隔的reporter类，比如kafka.metrics.K...
分类：
其他好文 时间：
2015-04-08 10:38:22
阅读次数：
138
不知不觉来深圳快三年，感觉自己啥都没有做成，时间就已经跑远了，当初的梦想越来越远，留给自己的只是一声长叹！ 回想这些年下来，走了很多弯路，学习的东西特别杂乱，从前端到后端都有涉猎，比如后端：.NET,JAVA,PYTHON,RUBY,SCALA等等，前端：jquery,angularjs,back....
分类：
其他好文 时间：
2015-04-08 00:58:07
阅读次数：
123
Spark读取Hbase中的数据大家可能都知道很熟悉Spark的两种常见的数据读取方式（存放到RDD中）：（1）、调用parallelize函数直接从集合中获取数据，并存入RDD中；Java版本如下：1JavaRDD<Integer>myRDD=sc.parallelize(Arrays.asList(1,2,3));Scala版本如下：1valmyRDD=sc...
分类：
其他好文 时间：
2015-04-07 20:01:18
阅读次数：
285
