apache 网站上面已经有了已经构建好了的版本，我这里还是自己利用午休时间重新构建一下（jdk,python,scala的安装就省略了，自己可以去安装） http://www.apache.org/dist/spark/spark-1.0.1/ 具体官网的下载链接可...
分类：
其他好文 时间：
2014-07-23 17:40:11
阅读次数：
273
Gatling作为次时代的性能测试工具，由于其API简洁明了、性能出众，越来越受欢迎。但是运行Gatling脚本却有诸多不便，其提供的默认方式不是很方便。考虑到Gatling脚本本质上是Scala类，运行的时候还是使用的是java虚拟机，我们可以将其脚本的运行与Gradle结合起来。这样子就可以通过...
分类：
其他好文 时间：
2014-07-23 15:20:46
阅读次数：
239
使用telnet操作memcache，一般不常用1.使用方法1.连接到memcachedtelnet192.168.1.10011211addname0605[说明add是指令名name是key的名字(是以key/value存放),0标志,60表示数据存放60s5表示放入多大数据],如果一个key已...
分类：
Web程序 时间：
2014-07-23 15:11:36
阅读次数：
242
从上大学一直到现在（2014年），一直从事IT相关的工作，经历的角色包括：软件开发、系统架构、售前咨询、项目管理、技术管理、规划设计、工程设计、大数据应用研发等，可以说是一位IT界老兵了。看到这二十年，中国以及世界，在软件、互联网、通信、交通等技术影响下，发生的巨..
分类：
其他好文 时间：
2014-07-23 13:46:06
阅读次数：
202
此次发布的ODI新版本，目的是更好的支持当前市场上的大数据平台。大数据基因在不改变ODI工作效率的情况下，ODI增加了越来越多的数据源集成能力。ODI是在Oracle平台上标准的E-LT工具，事实上也是Oracle各个应用软件的数据集成工具。因此，与时俱进，增加对市场上当前流行数据源的集成是必然的，...
分类：
其他好文 时间：
2014-07-23 12:28:58
阅读次数：
228
王家林简介Spark亚太研究院院长和首席专家，中国目前唯一的移动互联网和云计算大数据集大成者。在Spark、Hadoop、Android等方面有丰富的源码、实务和性能优化经验。彻底研究了Spark从0.5.0到0.9.1共13个版本的Spark源码，并已完成2014年5月31日发布的Spark1.0...
分类：
移动开发 时间：
2014-07-22 23:29:47
阅读次数：
241
不知道什么时候大家都開始谈论大数据，筑尼玛第一次接触大数据是在今年年初出差的时候在机场见到的，筑尼玛比較喜欢看书所以当时就跟风买了一本维克托?迈尔?舍恩伯格的《大数据时代:生活、工作与思维的大变革》，只是由于工作比較忙一直放在角落里落灰，直到4月14日百度的新功能百度司南正式开售，筑尼玛才又開始好好...
分类：
其他好文 时间：
2014-07-22 23:08:12
阅读次数：
186
对于刚接触大数据的用户来说，要想区分Hive与HBase是有一定难度的。本文将尝试从其各自的定义、特点、限制、应用场景等角度来进行分析，以作抛砖引玉之用。Hive是什么？Apache Hive是一个构建于Hadoop(分布式系统基础架构)顶层的数据仓库，注意这里不是数据库。Hive可以看作是用户编程...
分类：
其他好文 时间：
2014-07-22 22:45:54
阅读次数：
257
数据库奠基人Jim Gray：“磁带已经死了，磁盘已经落伍，闪存成为存储，内存才是王道”。“不管磁盘是否消融，闪存都是将来的一个趋势。”石油一直直接影响着世累经济的发展速度和发展水平，现在，信息将发挥同样的作用。《经济学人》表示：“数据和信息日益成为商业的新能源，是一种与资本、劳动力并列的新经济元素...
分类：
其他好文 时间：
2014-07-22 22:36:32
阅读次数：
318
随着科技的发展，信息的收集也越来越容易，再加上摩尔定律，大的数据量处理也成为了可能。
什么是大数据，也许你有几千个人的基本信息、也许你有数百条购物记录，但这都不不是大数据，大数据至少在千万的数据量上。
大数据有什么作用？其实数据中是包含各种规律的，互联网时代的数据以不在那么直观，再加上超大的数据量，人工已经很难从中找到规律或者关联了，但这并不意味着这些规律联系永远无法被发掘出来，事实...
分类：
其他好文 时间：
2014-07-22 14:46:04
阅读次数：
132
