1、什么是storm Apache Storm is a free and open source distributed realtime computation system. 免费、开源、分布式、实时计算系统 Storm makes it easy to reliably process un ...
分类:
其他好文 时间:
2018-06-21 17:18:16
阅读次数:
172
数据中心管理——Pillar Pillar is an interface for Salt designed to offer global values that can be distributed to minions. Pillar data is managed in a similar ...
分类:
其他好文 时间:
2018-06-18 19:23:49
阅读次数:
283
简介 定义 原文:In a distributed system (a collection of interconnected nodes that share data.), you can only have two out of the following three guarantees ...
分类:
其他好文 时间:
2018-06-18 18:53:03
阅读次数:
241
Ddos攻击防护 首先我们说说ddos攻击方式,记住一句话,这是一个世界级的难题并没有解决办法只能缓解 DDoS(Distributed Denial of Service,分布式拒绝服务)攻击的主要目的是让指定目标无法提供正常服务,甚至从互联网上消失,是目前最强大、最难防御的攻击之一。这是一个世界 ...
分类:
其他好文 时间:
2018-06-17 14:19:22
阅读次数:
209
一:介绍 1.说明 Storm里面引入DRPC主要是利用storm的实时计算能力来并行化CPU intensive的计算。DRPC的storm topology以函数的参数流作为输入,而把这些函数调用的返回值作为topology的输出流。 2.工作机制 Distributed RPC是由一个”DPR ...
分类:
其他好文 时间:
2018-06-12 23:30:05
阅读次数:
275
Distributed processing Tool 好处 坏处 类型 支持序列化 支持根据负载动态调度任务 支持c 支持dependency的调度 有成熟的library Actor model 天生支持分布式,本身已经包含基本的serialization功能 比较底层 需要自己编写调度代码 没 ...
分类:
其他好文 时间:
2018-06-11 01:55:26
阅读次数:
213
NoSQL:NoSQLDEFINITION:NextGenerationDatabasesmostlyaddressingsomeofthepoints:beingnon-relational,distributed,open-sourceandhorizontallyscalable.ACID:原子性、一致性、隔离性、持久性;2phasecommit,3phasecomit,...nonSQL,
分类:
其他好文 时间:
2018-06-08 15:55:04
阅读次数:
176
RDD 介绍 RDD,全称Resilient Distributed Datasets(弹性分布式数据集),是Spark最为核心的概念,是Spark对数据的抽象。RDD是分布式的元素集合,每个RDD只支持读操作,且每个RDD都被分为多个分区存储到集群的不同节点上。除此之外,RDD还允许用户显示的指定 ...
分类:
编程语言 时间:
2018-06-07 20:46:38
阅读次数:
334
RDD(Resilient Distributed Dataset)叫做分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行计算的集合。RDD具有数据流模型的特点:自动容错、位置感知性调度和可伸缩性。 RDD包含很多分区,由一系列分区构成,一个分区构成一个逻辑分片 ...
分类:
其他好文 时间:
2018-06-06 22:08:33
阅读次数:
254
HDFS是Hadoop集群的文件系统,这是一种分布(distributed)、容错(fault tolerant)的文件系统 所谓分布,是说整个文件系统的内容并非集中存储在一台或几台“文件服务器上”,而是分散在集群的不同节点上 对于大数据文件系统,文件之所以应该是分布式的,不再仅仅是容量和容错的问题 ...
分类:
其他好文 时间:
2018-06-03 16:25:30
阅读次数:
169