Apache Kafka? is a distributed streaming platform. What exactly does that mean? Apache Kafka?是一个分布式平台。 这究竟是什么意思? We think of a streaming platform as h ...
分类:
其他好文 时间:
2017-09-17 19:00:56
阅读次数:
284
PART 1 梗概 git文件流转有三个工作区域:工作目录(working directory)、暂存区域(staging area)、本地仓库(repository)。文件处于上述三个工作区域的状态分别为:已修改、已暂存、已提交。 基本的git工作流程:在working diretory修改文件— ...
分类:
其他好文 时间:
2017-09-16 19:07:14
阅读次数:
213
概述 在高层次上,每个Spark应用程序都由一个运行用户main方法的driver program组成,并在集群上执行各种 parallel operations。Spark提供的主要抽象是resilient distributed dataset (RDD),它是可以并行操作的群集节点之间分配的元 ...
分类:
其他好文 时间:
2017-09-12 18:30:01
阅读次数:
116
通过mdsip协议进行Tcp/Ip进行数据交流,mdsip在数据服务端运行,数据客户端进行数据的检索和存储。针对数据客户端有两种配置方式: -Distributed Client -Thin Client 在分布式配置中,大多数的数据的访问操作是在客户端这边进行,除了对服务器端进行磁盘的I/O操作外 ...
分类:
其他好文 时间:
2017-09-09 13:49:34
阅读次数:
147
RDD(Resilient Distributed Datasets)弹性分布式数据集。RDD可以看成是一个简单的"数组",对其进行操作也只需要调用有限的"数组"中的方法即可,但它与一般数组的区别在于:RDD是分布式存储,可以跟好的利用现有的云数据平台,并在内存中进行。此处的弹性指的是数据的存储方式 ...
分类:
其他好文 时间:
2017-09-09 13:48:30
阅读次数:
152
不确定为什么要去,正是出发的理由。 Node.js 是如何工作的? Node.js 的主要思路是:使用非阻塞的,事件驱动的 I/O 操作来保持在处理跨平台 (across distributed devices) 数据密集型实时应用时的轻巧高效。 Node 真正的亮点在于建设高性能,高扩展性的互联网 ...
分类:
Web程序 时间:
2017-09-07 19:30:20
阅读次数:
184
SQL 错误: ORA-01591: 锁被未决分布式事务处理 7.2.428982 持有 01591. 00000 - "lock held by in-doubt distributed transaction %s" *Cause: Trying to access resource that ...
分类:
其他好文 时间:
2017-09-06 16:44:49
阅读次数:
954
在ZooKeeper的官网上有这么一句话:ZooKeeper is a centralized service for maintaining configuration information, naming, providing distributed synchronization, and ...
分类:
其他好文 时间:
2017-09-05 19:04:06
阅读次数:
193
1:分布式文件系统(Distributed File System): (1):数据量越来越多,在一个操作系统管辖的范围存不下了,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,因此迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统 。(2):是一种允许文件通过网络在多台 ...
分类:
其他好文 时间:
2017-09-03 17:55:36
阅读次数:
198
UUID简介如下:1.简介UUID含义是通用唯一识别码 (Universally Unique Identifier),这 是一个软件建构的标准,也是被开源软件基金会 (Open Software Foundation, OSF) 的组织应用在分布式计算环境 (Distributed Computi ...
分类:
Web程序 时间:
2017-09-02 20:42:20
阅读次数:
250