本期内容:1MapReduce架构解密2MapReduce运行集群研究3通过Java编程操作MapReduce实战Hadoop从2。0开始就已经必须运行在Yarn上面了,1.0时根本不关心Yarn。现在是MR,也是讲Yarn的,而且已经是基础入门阶段。零基础已经过去了。明天开始-20个左右的MapReduce代码的集合讲解一:..
分类:
其他好文 时间:
2016-02-10 18:50:08
阅读次数:
210
注:以下内容为根据《高性能mysql第三版》和《mysql技术内幕innodb存储引擎》的innodb status部分的个人理解,如果有错误,还望指正!! innodb存储引擎在show engine innodb status(老版本对应的是show innodb status)输出中,显示除了
分类:
数据库 时间:
2016-01-30 22:18:16
阅读次数:
551
今晚听了王家林老师的第15课RDD创建内幕彻底解密,课堂笔记如下:Spark driver中第一个RDD:代表了Spark应用程序输入数据的来源.后续通过Transformation来对RDD进行各种算子的转换实现算法创建RDD的方法:1,使用程序中的集合创建RDD;2,使用本地文件系统创建RDD;...
分类:
其他好文 时间:
2016-01-19 00:01:54
阅读次数:
170
1,通过浏览器请求一个资源,会发生以下几种过程1) http的解析过程,包括对于http请求头和响应头中指令(控制用户浏览器的渲染行为和 服务器的执行逻辑)的解析2)DNS的解析过程(根据域名获取目标ip地址的过程---也就是获取处理http请求的服务器的ip)3)CDN工作机制(内容分布网络的工作...
分类:
编程语言 时间:
2016-01-16 19:29:21
阅读次数:
160
第2、3章 基础三种类模式:属性-行为模式、属性模式、行为模式。其中属性模式有:PO(持久化对象)、BO(业务对象)、VO(值对象)、DTO(传输数据对象)、FromBean(页面对象)他们是对JavaBean的扩展增强。行为模式其中的方法是“请求对应模式”的天然载体。当我们载入一个Jar包到cla...
分类:
其他好文 时间:
2016-01-15 20:31:13
阅读次数:
927
在科技媒体界,虎嗅早已被吹封为业界的一个神话。同样被阿里巴巴投资的新浪微博和虎嗅,虎嗅和新浪微博闹得不可开交,为何展开撕逼大战,至今任是一个痛点。2015年11月27日00:44分,虎嗅网在其网站发表文章《新浪为什么这么大火气》怒斥虎嗅微博账号被新浪单方面封停的消息,..
分类:
其他好文 时间:
2016-01-08 16:00:03
阅读次数:
269
前提storageLevel != null读源码查看先看ietrator,查看storageLevel看sparkEnv.getMemoryManger,通过block manager来操作具体的storage,a list of partitions;RDD获取缓存实质上通过block mana...
分类:
其他好文 时间:
2015-12-30 13:04:21
阅读次数:
141
这一年总得来说,读书的时间不多。一是因为时间啥关系,这一年一直在跟着项目走,或者被项目牵着走,几乎所有的时间和精力全部被拴在几个项目上;不过所幸今年创业失败,又回去上班了,时间相对空余了一些。 双十一是一个好日子,持续关注的几本书,几乎五折入手,其中有一本叫做《mysql技术内幕-innodb存.....
分类:
数据库 时间:
2015-12-25 18:47:16
阅读次数:
192
jquery特性1.兼容主流浏览器,支持IE6.0,Chrome,Firefox3.6,safari5.0,opera等2.独特的链式语法和短小清晰的多功能接口3.具有高效灵活的CSS 选择器,并且可对CSS选择器拓展;4.便捷的插件机制2.1.4 jQuery(object)示例:var foo ...
分类:
Web程序 时间:
2015-12-23 22:51:42
阅读次数:
211