基于hadoop (map/reduce)的大规模分布式并行计算生产排程系统的设计
map/reduce是大数据处理的技术，它的思路是把大规模数据分成一个个小数据块，每个数据块由一个map任务来处理，处理的中间结果汇总到reduce,最后生成最终的处理结果，这个处理和汇总的过程是可以反复多次的，也就是map-reduce-map-reduce
基于map/redu...
分类：
其他好文 时间：
2014-10-06 13:19:00
阅读次数：
127
Spark亚太研究院决胜大数据时代公益大讲坛第五期：SparkSQL架构和案例深入实战，视频地址：http://pan.baidu.com/share/link?shareid=3629554384&uk=4013289088&fid=977951266414309王家林老师(邮箱：18610086...
分类：
数据库 时间：
2014-10-05 00:48:27
阅读次数：
713
第2期Spark亚太研究院决胜云计算大数据时代：100期Spark公益大讲堂之Shark、SparkSQL，视频地址：http://pan.baidu.com/share/link?shareid=3629554384&uk=4013289088&fid=277083257568965王家林老师(邮...
分类：
数据库 时间：
2014-10-04 23:51:27
阅读次数：
323
作者按：本文根据去年11月份CSDN举办的“大数据技术大会”演讲材料整理，最初发表于2012年2月期《程序员》杂志。1. 历史R（R Development Core Team, 2011）语言由新西兰奥克兰大学的 Ross Ihaka 和 Robert Gentleman 两人共同发明，其词法和语...
分类：
其他好文 时间：
2014-10-04 20:03:57
阅读次数：
277
好早的时候就打算写这篇文章，但是还是参加阿里大数据竞赛的第一季三月份的时候实验就完成了，硬生生是拖到了十一假期，自己也是醉了。。。找工作不是很顺利，希望写点东西回顾一下知识，然后再攒点人品吧，只能如此了。
一、问题背景
二、基于用户的协同过滤算法介绍
三、数据结构和实验过程设计
四、代码...
分类：
编程语言 时间：
2014-10-03 21:50:45
阅读次数：
281
之前看过一本名叫大数据挑战的书>>，里面主要讲了NOSQL的内容，感觉讲得确实不错，今天来重新温习一下，我们大话NOSQL。说道NOSQL，我们肯定联想到的内容就是BigData大数据了，不错，当今的时代就是大数据的时代了。如果放在前几年，互联网还没有这么发达的情况下，也许谁也不会听过这个名词。在讲正题的时候，我做了张图来看看一般服务端架构在面对业务发展的需要时候，一般的演变趋势：
所以...
分类：
数据库 时间：
2014-10-03 19:06:55
阅读次数：
303
理论基础：Hadoop 分布式文件系统架构HDFS 负责大数据存储MapReduce 负责大数据计算namenode master守护进程datanode slaves上负责存储的进程secondarynamenode master上提供周期检查和清理任务的进程jobtracker maste...
分类：
其他好文 时间：
2014-10-03 01:34:04
阅读次数：
451
Atitit. BigConfirmTips 控件 大数据量提示确认控件的原理and总结O9
1. 主要的涉及的技术 1
2. 主要的流程 1
3. 调用法new confirmO9t(); 1
4. 设置确认在后的回溯事件 c.backHandle="window.opener.confirmSubmitBackeventHandle"; 2
5. 设置详细表格显示模板 c.t...
分类：
其他好文 时间：
2014-10-02 23:07:13
阅读次数：
179
电子游戏将在2014年获得488亿的收入。所有的收入需要一个庞大而复杂的支付设施，从信用卡到电子钱包，预付费，和游戏点卡。有效的多样性货币化，对于全球的玩家有着很重大的意义，一点点错误就会对全世界的游戏开发商和游戏市场造成严重的伤害。在每个市场，开发商和发行商需要衡量双方的需要和个人玩家的喜好，并选择其中包括数百种不同的支付提供商。Xsolla在此提供和极少2015年网络游戏报告的支付偏好，希望通...
分类：
其他好文 时间：
2014-10-02 11:10:42
阅读次数：
267
