ATL（Active TEmplate Library）活动模板库RPC（Remote Procedure Call Protocol）远程过程调用协议DCE（Distributed Computing Environment）分布式计算环境OSF（Open Software Foundation）...
分类：
编程语言 时间：
2014-10-15 18:38:41
阅读次数：
422
了解hadoop，首先就需要先了解hadoop的数据流，就像了解servlet的生命周期似的。hadoop是一个分布式存储（hdfs）和分布式计算框架（mapreduce），但是hadoop也有一个很重要的特性：hadoop会将mapreduce计算移动到存储有部分数据的各台机器上。...
分类：
其他好文 时间：
2014-10-15 12:01:40
阅读次数：
199
1.起因(Why HBase Coprocessor)
HBase作为列族数据库最经常被人诟病的特性包括：无法轻易建立“二级索引”，难以执行求和、计数、排序等操作。比如，在旧版本的(统计数据表的总行数，需要使用Counter方法，执行一次MapReduce
Job才能得到。虽然HBase在数据存储层中集成了MapReduce，能够有效用于数据表的分布式计算。然而在很多情况下，做一些简单...
分类：
其他好文 时间：
2014-10-11 13:39:55
阅读次数：
298
分布式文件系统一、基础原理分布式文件系统（DistributedFileSystem）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连。简单点说就是把数据分散存储到不同节点上的一种存储机制。谈到分布式文件存储不得不和传统存储做一下对比分布式..
分类：
其他好文 时间：
2014-10-05 05:13:58
阅读次数：
435
异步计算分布式消息队列先进先出机制的队列，监听在服务器某个端口上的服务，它可以维护并管理很多消息队列，应用程序可以通过网络快速访问它，为某个队列追加消息或者从某个队列领取消息。并行计算Map/Reduce是一种分布式并行计算的开发框架，任何计算任务都可以经历从拆分到..
分类：
其他好文 时间：
2014-10-01 01:29:30
阅读次数：
221
1.云计算与大数据的关系从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式计算架构。它的特色在于对海量数据的挖掘,但它必须依托云计算的分布式处理、分布式数据库、云存储和虚拟化技术。2.云在技术层面..
分类：
其他好文 时间：
2014-09-29 20:16:41
阅读次数：
264
1、集群部署介绍1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用....
分类：
其他好文 时间：
2014-09-28 14:04:02
阅读次数：
309
当今的我们已经处于计算机比较发达的时代，计算机的很多技术已经发展很久，很多我们现在使用的都是在一定基础结构之上的研究，
就好像我们学会了hadoop，webservices.....，学会了大数据计算，就是掌握了分布式技术吗？ 感觉心慌、疑惑。这些疑惑不知道从什么时候开始的，
所以要想弄清是怎么回事，还是回到遥远的过去吧.........
分类：
其他好文 时间：
2014-09-27 04:51:49
阅读次数：
204
本文是我对分布式计算的算子这层的一些认识和想法。因为最近自己的开发任务也是这方面相关的，公司内部有自研的类流式计算框架需要做一层算子层。我主要分析的是流式系统上实现算子这一点入手，对比现有计算框架和业界正在开展的项目，分析分析这件事的表面和背后深层的含义，以及可想象空间。...
分类：
其他好文 时间：
2014-09-26 19:59:38
阅读次数：
220
每天积累一点点，终有一天会水落石出，不明白的地方越来越多，对于分布式计算从底层开始走起，会理解的更深刻。
进程间的通信是什么？和分布式又怎么扯上了关系？ 怎么定义？ 缠绕心中，不得其所
1、进行间通信的基本原理
2、接口与接口定义语言
3、数据表示与编码
4、事件同步机制...
分类：
其他好文 时间：
2014-09-26 02:41:48
阅读次数：
445
