J2EE中常用的名词解释 ① web容器:给处于其中的应用程序组件(JSP,SERVLET)提供一个环境,使JSP,SERVLET直接和容器中的环境变量接口交互,不必关注其它系统问题。主要由WEB服务器来实现。例如:TOMCAT,WEBLOGIC,WEBSPHERE等。该容器提供的接口严格遵守J2E ...
分类:
其他好文 时间:
2017-11-11 00:36:12
阅读次数:
185
Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 这些场景都有一个共同点: 数据是由上游模块产生,上游模块,使用上游模块的数据计算、统计、分析,这个时候就可以使用消息系统,尤其是分布式消息系统! 2、Kafka的定义 What is ...
分类:
其他好文 时间:
2017-11-11 00:33:20
阅读次数:
126
1.mongoDB简介 1.1 NoSQL数据库 数据库:进行高效的、有规则的进行数据持久化存储的软件 NoSQL数据库:Not only sql,指代非关系型数据库 优点:高可扩展性、分布式计算、低成本、灵活架构、半结构化数据、简化关联关系 缺点:没有标准化、有限查询、不直观 常见NoSQL数据库 ...
分类:
数据库 时间:
2017-11-07 22:59:57
阅读次数:
332
拜占庭将军问题(Byzantine Generals Problem),是由莱斯利·兰波特在其同名论文[1]中提出的分布式对等网络通信容错问题。 在分布式计算中,不同的计算机通过通讯交换信息达成共识而按照同一套协作策略行动。但有时候,系统中的成员计算机可能出错而发送错误的信息,用于传递信息的通讯网络 ...
分类:
其他好文 时间:
2017-11-07 00:07:57
阅读次数:
129
转载自:https://zhuanlan.zhihu.com/p/25772054 让代码分布式运行是所有分布式计算框架需要解决的最基本的问题。 Spark是大数据领域中相当火热的计算框架,在大数据分析领域有一统江湖的趋势,网上对于Spark源码分析的文章有很多,但是介绍Spark如何处理代码分布式 ...
分类:
其他好文 时间:
2017-11-05 13:09:33
阅读次数:
216
Zookeeper用途场景: 1:zookeeper分布式服务框架:是Apache Hadoop的一个子项目,主要是用来解决分布式应用场景中经常遇到的一些数据管理问题。 2:如:集群管理、统一命名服务、分布式配置管理、分布式消息队列、分布式锁、分布式通知协调等。 3:越来越多的分布式计算开始强依赖Z ...
分类:
其他好文 时间:
2017-11-05 00:28:53
阅读次数:
293
WebServices特点介绍 WebServices 提供一个建立分布式应用的平台,使得运行在不同操作系统和不同设备上的软件,或者是用不同的程序语言和不同厂商的软件开发工具开发的软件,所有可能的已开发和部署的软件,能够利用这一平台实现分布式计算的目的。WebServices的思想是:使得应用程序也 ...
分类:
Web程序 时间:
2017-11-03 14:17:48
阅读次数:
258
前言 本文搭建了一个由三节点(master、slave1、slave2)构成的Hadoop完全分布式集群(区别单节点伪分布式集群),并通过Hadoop分布式计算的一个示例测试集群的正确性。 本文集群三个节点基于三台虚拟机进行搭建,节点安装的操作系统为Centos7(yum源),Hadoop版本选取为 ...
分类:
其他好文 时间:
2017-10-28 20:32:29
阅读次数:
262
zh.wikipedia.org/wiki/面向服务的架构 【程序功能做为服务】 面向服务的体系结构(英语:service-oriented architecture)是构造分布式計算的应用程序的方法。它将应用程序功能作为服务发送给最终用户或者其他服务。 它采用开放标准、与软件资源进行交互并采用表示 ...
分类:
其他好文 时间:
2017-10-27 23:08:10
阅读次数:
244
keepalived:
LB:lvs,nginx
HA:keepalived,heartbeat,corosync,cman
HP:高性能集群
分布式存储:HDFS
分布式计算:YARN,
batch:MapReduce
in-memory:spark
stream:storm
keepalived:
active/passive
ntp:networktimeprotocol
date修改时间方法:
date:..
分类:
其他好文 时间:
2017-10-26 10:20:49
阅读次数:
323