比如说这个消息队列系统，我们来从以下几个角度来考虑一下 （1）首先这个mq得支持可伸缩性吧，就是需要的时候快速扩容，就可以增加吞吐量和容量，那怎么搞？设计个分布式的系统呗，参照一下kafka的设计理念，broker → topic → partition，每个partition放一个机器，就存一部分 ...
分类：
其他好文 时间：
2021-04-13 12:22:01
阅读次数：
0
内容简介 当使用Elasticsearch做为“大时间”的数据分析的时候，建议使用时间作为索引，并设置三种不同类型的节点（主、热、温），也就是我们说的「Hot-Warm」架构。 本文介绍了「Hot-Warm」架构的一些基本概念、要注意的一些问题、如何搭建集群。 节点类型 每个节点都有他们自己的作用， ...
分类：
其他好文 时间：
2021-04-12 12:30:53
阅读次数：
0
Kafka集群搭建 Zookeeper简介 ZooKeeper 是一个开源的分布式框架，提供了协调分布式应用的基本服务。它向外部应用 暴露一组通用服务——分布式同步（Distributed Synchronization）、命名服务（Naming Service）、集群维护（Group Mainte ...
分类：
其他好文 时间：
2021-04-12 11:49:15
阅读次数：
0
Docker部署kafka集群 利用docker可以很方便的在一台机子上搭建kafka集群并进行测试。为了简化配置流程，采用docker-compose进行进行搭建。 kafka搭建过程如下： 编写docker-compose.yml文件,内容如下: version: '3.3' services: ...
分类：
其他好文 时间：
2021-04-10 12:51:06
阅读次数：
0
一、大数据框架三种语义???? 在分布式系统中，如kafka、spark、flink等构成系统的任何节点都是被定义为可以彼此独立失败的。比如在 Kafka 中，broker 可能会 crash，在 producer 推送数据至 topic 的过程中也可能会遇到网络问题。根据 producer 处理此 ...
分类：
其他好文 时间：
2021-04-09 13:27:18
阅读次数：
0
【1】多个资源请求 （1.1）基本查多个索引 您可以使用逗号分隔的列表对多个资源 test1,test2,test3 （1.2）通配符，like 之类的模糊查询 还可以使用通配符 * ，如： test*或*test或te*t或*test*。 您可以使用以下-字符排除目标：test*,-test3。 ...
zkCli.sh ls / 记住zk的根目录下内容 ls或者get /kafka/cluster/id 查看zk下的kafuka controller ls /kafka/brokers/ kafka目录下 config查看配置：server.properties broker.id=0 liste ...
分类：
其他好文 时间：
2021-04-08 13:49:09
阅读次数：
0
介绍 Elasticsearch是一款高扩展的分布式搜索引擎，在很多地方用到。关于它的介绍，网上的文章一大堆，这里我就不重复赘述了。值得一提的是，ES的更新太快了，记得之前为了做项目简单学一点的时候还是6.x， 现在都已经7.x了。 安装 这里关于安装可以跟着官方文档走，以及后面的学习。 Elast ...
分类：
其他好文 时间：
2021-04-08 13:07:46
阅读次数：
0
部署nginx #1.先去查看仓库有没有镜像 root@fanwd-virtual-machine:/home# docker search nginx NAME DESCRIPTION STARS OFFICIAL AUTOMATED nginx Official build of Nginx. ...
分类：
其他好文 时间：
2021-04-08 13:07:20
阅读次数：
0
https://www.jianshu.com/p/abbc09ed6703 https://blog.csdn.net/wangshuminjava/article/details/80238161?utm_medium=distribute.pc_relevant.none-task-blog- ...
分类：
其他好文 时间：
2021-04-06 15:02:20
阅读次数：
0
