高阶函数val list =List(1,2,3,4,5,6,7,8)val newList = list.map((x:Int) => 2*x) //map表示映射list中的每一个元素的值为原来的2倍//newList中的值为2,4,6,8,10,12,14,16也可直接写成val newLis...
分类:
其他好文 时间:
2014-08-18 01:29:13
阅读次数:
260
近日新写完的spark任务放到yarn上面执行时,在yarn的slave节点中一直看到报错日志:连接不到0.0.0.0:8030 。1 The logs are as below:2 2014-08-11 20:10:59,795 INFO [main] org.apache.hadoop.yarn...
分类:
其他好文 时间:
2014-08-17 21:08:52
阅读次数:
890
我所知道的Scala持久层框架有: 1、Slick? 2、Squeryl 3、Anorm(Play的持久层) 4、ScalaActiveRecord?(基于Squeryl之上) 5、circumflex-orm web框架的话 1、Spray(build on akka,完全异步,非阻塞,非常有...
分类:
其他好文 时间:
2014-08-16 21:13:41
阅读次数:
180
数组要点
若长度固定则使用Array,若长度可能有变化则使用ArrayBuffer;提供初始值时不要使用new;用()来访问元素;用for(elem
例子:
import scala.collection.mutable.ArrayBuffer;
object HelloWorld {
def main(args: Array[String]) {
//实现一个可...
分类:
其他好文 时间:
2014-08-16 17:10:40
阅读次数:
211
AJAXXMLHttpRequest,是AJAX得以实现的基础他是一个对象,有几个需要记住的方法和属性:XMLHttpRequest方法open(method, url, async, username, password)method: post或geturl: 请求地址async: boolea...
分类:
其他好文 时间:
2014-08-16 16:15:30
阅读次数:
208
1408171404636### <iq id="aSb6h-0" type="set" from="linux/eab452f7"> ? <bind xmlns="urn:ietf:params:xml:ns:xmpp-bind"> ??? <resource>Spark 2.6.3</resource> ? </bind> </iq> 1408171404641### <iq...
分类:
其他好文 时间:
2014-08-16 15:13:21
阅读次数:
333
两者都是Actionscript开发的UI组件库。
都比Flex组件库“轻”很多。
FlexLite基本沿袭了Flex的Spark组件框架的结构设计(失效机制,延迟渲染,皮肤等),去除了一些功能。从而变得“轻”。
MoreUI基本结构和Flex3时代的mx组件框架的结构设计,没有将皮肤功能分离出来。与Flex组件相比,属性、功能减少了很多,从而变得“轻”。
我对两者的评价:...
分类:
其他好文 时间:
2014-08-15 23:50:19
阅读次数:
458
本文简要描述线性回归算法在Spark MLLib中的具体实现,涉及线性回归算法本身及线性回归并行处理的理论基础,然后对代码实现部分进行走读。
分类:
其他好文 时间:
2014-08-15 21:05:49
阅读次数:
562
Spark已正式申请加入Apache孵化器,从灵机一闪的实验室“电火花”成长为大数据技术平台中异军突起的新锐。本文主要讲述Spark的设计思想。Spark如其名,展现了大数据不常见的“电光石火”。具体特点概括为“轻、快...
分类:
其他好文 时间:
2014-08-15 14:53:59
阅读次数:
338