大数据第一天1.Hadoop生态系统 1.1 Hadoop v1.0 架构 MapReduce(用于数据计算) HDFS(用于存储数据) 1.2 Hadoop v2.0 架构 MapReduce(用于数据计算，Hadoop提供计算框架) 其他非Hadoop计算框架 YARN(用户管理...
分类：
其他好文 时间：
2015-11-24 14:52:07
阅读次数：
143
1、Spark介绍Spark是起源于美国加州大学伯克利分校AMPLab的大数据计算平台，在2010年开源，目前是Apache软件基金会的顶级项目。随着Spark在大数据计算领域的暂露头角，越来越多的企业开始关注和使用。2014年11月，Spark在Daytona Gray Sort 100TB Be...
分类：
其他好文 时间：
2015-11-18 19:37:49
阅读次数：
458
利用select 函数 实现sleep达到纳米级 。 ?当然这个数据计算出来不准确，本身就包含程序执行本身消耗的数量。 ?原理是把select read write except ?fd_set 全部设为NULL，这样select 就可以等待指定的时间。...
分类：
其他好文 时间：
2015-11-18 00:55:07
阅读次数：
209
转载：http://blog.sina.com.cn/s/blog_83bb57b70101qeys.html一直纠结于R的大数据计算问题，希望可以找到一个彻底的方案解决它。而云服务器当然是解决这个问题的最佳方案，所以，至少从这方面入手。R的云服务器部署有两种解决方案，一种是使用R语言的并行计算，另...
分类：
编程语言 时间：
2015-11-16 12:13:29
阅读次数：
352
html是用来做网页的表现层的，也就说你可以看到的。如字体、链接，图片等。php是用来处理逻辑层的，也就是你要网页提供什么功能，完成什么动作。如查询数据，计算利息，生成图表等。php代码是嵌入html中的。所以学什么之间是没有冲突的，关键是你是负责界面设计的还是负责数据处理的,你学php最好要有ht...
分类：
Web程序 时间：
2015-11-11 16:22:11
阅读次数：
213
一，介绍Oozie是一个基于Hadoop的工作流调度器，它可以通过Oozie Client 以编程的形式提交不同类型的作业，如MapReduce作业和Spark作业给底层的计算平台(如 Cloudera Hadoop)执行。Quartz是一个开源的调度软件，它为任务的调度执行提供了各种触发器以及监听...
分类：
其他好文 时间：
2015-11-06 22:20:22
阅读次数：
5368
原创文章，欢迎转载。转载请注明：关东升的博客 计算属性本身不存储数据，而是从其他存储属性中计算得到数据。 计算属性概念： 计算属性提供了一个getter（取值访问器）来获取值，以及一个可选的setter（设置访问...
分类：
编程语言 时间：
2015-11-06 11:24:55
阅读次数：
190
原创文章，欢迎转载。转载请注明：关东升的博客计算属性本身不存储数据，而是从其他存储属性中计算得到数据。计算属性概念：计算属性提供了一个getter（取值访问器）来获取值，以及一个可选的setter（设置访问器）来间接设置其他属性或变量的值。计算属性的语法格式如下：面向对象类型 类型名 { ...
分类：
编程语言 时间：
2015-11-06 11:01:24
阅读次数：
165
jsonJava有足够多的类库用于解析和生成json，但缺乏后续计算能力。集算器支持多层结构数据，可以不丧失信息地将json解析成可计算的内存数据表进一步处理。设有如下格式的json数据： { “order”:[ { “client”:”北京润乾软件”, “date”:”2015-6-23”, “....
分类：
其他好文 时间：
2015-10-30 10:34:16
阅读次数：
172
计算机的本质就是处理数据计算机的语言是用来操作计算机的代码把计算机看成是一个大型的系统，里面有各种软件（program）,凡是看不到的都可以称之为软件，无论是计算机这个大型的软件还是里面的各种小的软件，软件的本质就是一个程序，一个程序就是处理数据的，即输入数据 ，处理数据，输出数据 这三个过程。如搜...
分类：
其他好文 时间：
2015-10-30 10:31:13
阅读次数：
156
