分布式(不一定有集群): 是指将不同的业务分布在不同的地方(应用服务器)。 集群cluster: 一群机器的集合。 负载均衡(集群):(Load balance cluster, LBC) (负载均衡器)根据规则(平均)分配各请求到一个集群各个机器。 高可用(集群):(High availabili ...
分类:
其他好文 时间:
2018-07-02 11:03:36
阅读次数:
148
MQ 消息队列 消息队列(Message Queue)简称MQ,是阿里巴巴集团中间件技术部自主研发的专业消息中间件。 产品基于高可用分布式集群技术,提供消息发布订阅、消息轨迹查询、定时(延时)消息、资源统计、监控报警等一系列消息云服务,是企业级互联网架构的核心产品。 MQ 历史超过9年,为分布式应用 ...
分类:
其他好文 时间:
2018-06-29 13:57:51
阅读次数:
171
ELK安装准备工作准备3台机器,这样才能完成分布式集群的实验,当然能有更多机器更好:配置三台机器的hosts文件内容如下:vim/etc/hosts192.168.254.133master-node192.168.254.134data-node1192.168.254.135data-node2角色划分:?3台机器全部安装jdk1.8,因为elasticsearch是java开发的?3台全部安
分类:
其他好文 时间:
2018-06-27 23:06:17
阅读次数:
341
参考博文: "Nginx反向代理实现Tomcat分布式集群" 1. jdk 安装 jdk 下载网址: "http://www.oracle.com/technetwork/java/javase/downloads/jdk8 downloads 2133151.html" 执行如下: 这样就安装好了 ...
分类:
其他好文 时间:
2018-06-24 16:09:44
阅读次数:
186
一、分区原理 1.为什么要分区?(这个借用别人的一段话来阐述。) 为了减少网络传输,需要增加cpu计算负载。数据分区,在分布式集群里,网络通信的代价很大,减少网络传输可以极大提升性能。mapreduce框架的性能开支主要在io和网络传输,io因为要大量读写文件,它是不可避免的,但是网络传输是可以避免 ...
分类:
其他好文 时间:
2018-06-23 19:11:01
阅读次数:
197
一、是什么 Zookeeper 作为一个分布式高可用、高性能的开源协调服务框架,主要用来解决分布式集群中应用系统的一致性和多个进程间的同步控制问题,分布式应用程序可以基于 Zookeeper 实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master 选举、分布式锁和分布式 ...
分类:
其他好文 时间:
2018-06-21 22:39:07
阅读次数:
215
在很多高并发请求的情况下,我们经常需要对系统进行限流,而且需要对应用集群进行全局的限流,那么我们如何类实现呢。 我们可以利用redis的缓存来进行实现,并且结合mysql数据库一起,先来看一个流程图。 这个就是一个典型的对http请求进行全局限流的流程图。 入口通过请求拦截器进行拦截(filter) ...
分类:
其他好文 时间:
2018-06-16 15:11:52
阅读次数:
164
一、为什么要使用分布式锁 为了保证一个方法或属性在高并发情况下的同一时间只能被同一个线程执行,在传统单体应用单机部署的情况下,可以使用Java并发处理相关的API(如ReentrantLock或Synchronized)进行互斥控制。但是,随着业务发展的需要,原单体单机部署的系统被演化成分布式集群系 ...
分类:
其他好文 时间:
2018-06-16 10:33:57
阅读次数:
193
一:Hadoop集群简介: Hadoop 集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起; HDFS集群:负责海量数据的存储,集群中的角色主要有: NameNode、DataNode、SecondaryNameNode; YARN集群:负责海量数据运算时的资源 ...
分类:
其他好文 时间:
2018-06-15 10:52:48
阅读次数:
164
前言 俗话说的好,冰冻三尺非一日之寒,滴水穿石非一日之功,罗马也不是一天就建成的。两周前秒杀案例初步成型,分享到了中国最大的同性交友网站 码云。同时也收到了不少小伙伴的建议和投诉。我从不认为分布式、集群、秒杀这些就应该是大厂的专利,在互联网的今天无论什么时候都要时刻武装自己,只有这样,也许你的春天就 ...
分类:
其他好文 时间:
2018-06-11 10:53:47
阅读次数:
179