package com.leegh.parameterization/** * @author Guohui Li */import scala.reflect.ClassTagclass Trible[F, S, T](val first: F, val second: S, val third:...
分类：
其他好文 时间：
2015-08-26 09:24:38
阅读次数：
168
分布式系统并不是什么新鲜词，在上个世纪七八十年代就已经有各种分布式系统出现。只是在互联网时代，分布式系统才大放异彩，尤其是Google更是把分布式系统运用到了极致。Google整个的软件构架都是基于各种各样的分布式系统，诸如Borg、MapReduce、BigTable等。正是这些分布式系统，使得Google可以处理高并发请求响应以及海量数据处理等。Apache旗下的Hadoop、Spark、Me...
分类：
其他好文 时间：
2015-08-25 23:49:24
阅读次数：
163
源码位置：org.apache.spark.deploy.worker.Worker.scala
首先查看worker的main方法，与master类似，创建sparkConf，参数解析，以及构造worker对象并创建ActorRef用于对外或者本身的信息交互。这里masters参数可以设置多个
def main(argStrings: Array[String]) {
Sig...
分类：
其他好文 时间：
2015-08-25 21:54:18
阅读次数：
539
本节主要内容
缓冲区的使用
文件的存盘与读盘
文本查找
文本替换
1. 缓冲区的使用在利用vim进行文本编辑时，编辑修改后的文本不会立即保存到硬盘上，而是保存在缓冲区中，如果没有把缓冲区里的文件存盘，原始文件不会被更改。vim在打开文件时将文本内容读到缓冲区中，在进行文本编辑时，修改的文本保存在缓冲区，此时硬盘上的原文件不变。下面让我们来演示一下缓冲区的使用。
假设采用vim 同时打开两个文本文件...
分类：
系统相关 时间：
2015-08-25 21:37:07
阅读次数：
291
王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典（1-87讲）完整视频、PPT、代码下载：百度云盘：http://pan.baidu.com/s/1c0noOt6 腾讯微云：http://url.cn/TnGbdC 360云盘：http://yunpan.cn/cQ4c2U...
分类：
其他好文 时间：
2015-08-25 18:58:12
阅读次数：
153
我们兴奋地宣布,从今天开始,Apache Spark1.5.0的预览数据砖是可用的。我们的用户现在可以选择提供集群与Spark 1.5或先前的火花版本准备好几个点击。 正式,Spark 1.5预计将在数周内公布,和社区所做的QA测试的版本。...
分类：
其他好文 时间：
2015-08-25 17:14:39
阅读次数：
421
我们兴奋地宣布,从今天开始,Apache Spark1.5.0的预览数据砖是可用的。我们的用户现在可以选择提供集群与Spark 1.5或先前的火花版本准备好几个点击。
正式,Spark 1.5预计将在数周内公布,和社区所做的QA测试的版本。鉴于火花的快节奏发展,我们觉得这是很重要的,使我们的用户尽快开发和利用新特性。与传统的本地软件部署,它可以需要几个月,甚至几年,从供应商收到软件更新。数据...
分类：
其他好文 时间：
2015-08-25 16:51:54
阅读次数：
242
本节主要内容
vim编辑器的三种模式
移动光标
输入模式
修改文本
作者：周志湖
微信号：zhouzhihubeyond
网名：摇摆少年梦1. vi编辑器的三种模式学会使用vi编辑器是学习linux系统的必备技术之一，因为一般的linux服务器是没有GUI界面的，linux运维及开发人员基本上都是通过命令行的方式进行文本编辑或程序编写的。vi编辑器是linux内置的文本编辑器，几乎所有的类uni...
分类：
系统相关 时间：
2015-08-25 16:40:06
阅读次数：
267
本节主要内容
Linux简史
Linux特点
Ubuntu Linux安装
Linux使用初步
1. Linux简史
要讲述大名鼎鼎的Linux，必然要先从UNIX系统谈起，下面这幅图给出了Unix系统的进化图：
图片来源：http://baike.baidu.com/link?url=QfoqWtWGs-BjpnfEy_AUk7Bm3XHuf6JbN92HCOoUBfFfj8Bu...
分类：
系统相关 时间：
2015-08-21 15:34:30
阅读次数：
256
原文地址：http://soft.chinabyte.com/database/431/12914931.shtml概述 什么是Spark ◆ Spark是UC Berkeley AMP lab所开源的类HadoopMapReduce的通用的并行计算框架，Spark基于map reduce算法实.....
分类：
其他好文 时间：
2015-08-21 15:17:40
阅读次数：
278
