实时数据分析门槛较高,我们如何用极少的开发工作就完成实时数据平台的搭建,做出炫酷的图表呢? 如何快速的搭建实时数据分析平台,首先我们需要实时数据的接入端,我们选择高扩展性、容错性、速度极快的消息系统Kafka,而实时数据仓库,由于 Druid提供了非常方便快捷配置方式,如果不想编写负责的Flink和 ...
分类:
其他好文 时间:
2020-04-28 14:53:34
阅读次数:
59
集群中时间不同步有可能会让大数据的应用程序运行混乱,造成不可预知的问题,比如Hbase、mongodb副本集等,Hbase当时间差别过大时就会挂掉,mongodb如果副本时间过快,会出现时间栈帧溢出提前出发选举等,所以在大数据集群中,ntp服务,应该作为一种基础的服务,以下在演示在CentOS 7. ...
分类:
系统相关 时间:
2020-04-26 13:47:38
阅读次数:
201
由于故障排查已经过了一段时间再写的这个随便,故这次无相关截图某天,运行正常的rabbitmq挂掉了,然后去重启的时候报错,启动不了,通过查看systemctlstatusrabbitmq-l和journalctl-urabbitmq查看错误信息,发现也没有什么有价值的信息。然后尝试着把/var/lib/rabbitmq/mnesia/目录下的文件移走,再重新启动,发现依然是报一样的启动错误,也没有
分类:
其他好文 时间:
2020-04-20 17:33:36
阅读次数:
104
一、首先,我们假设已经准备好三台互相联网的Linux机器,它们的IP地址分别为IP1、IP2和IP3。 二、配置文件zoo.cfg。初次使用ZooKeeper, 需要将%ZK_ HOME%/conf目录下的z00_ sample.cfg 文件重命名为zoo.cfg,并且按照如下代码进行简单配置即可: ...
分类:
其他好文 时间:
2020-04-09 12:38:57
阅读次数:
72
配置node0 # Elasticsearch Configuration # # NOTE: Elasticsearch comes with reasonable defaults for most settings. # Before you set out to tweak and tune ...
分类:
其他好文 时间:
2020-03-30 23:46:01
阅读次数:
129
为了避免单点故障,Eureka注册中心会有集群,配置的时候只需要相互注册即可 例如三个服务器 一: server: port: 8080 # 端口spring: application: name: eureka-server # 应用名称,会在Eureka中显示,集群时名称一致eureka: cl ...
分类:
其他好文 时间:
2020-03-27 12:44:56
阅读次数:
59
Spring Cloud是一系列框架的有序集合。它利用Spring Boot的开发便利性巧妙地简化了分布式系统基础设施的开发,如服务发现注册、配置中心、消息总线、负载均衡、断路器、数据监控等,都可以用Spring Boot的开发风格做到一键启动和部署。Spring Cloud并没有重复制造轮子,它只 ...
分类:
编程语言 时间:
2020-03-22 15:38:08
阅读次数:
78
下载地址 https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/ kafka同样依赖Java环境,由于和zookeeper在相同的机器上,之前已经安装过了,所有可以直接跳过Java环境安装 参考文档 https://www.cnblogs.com/pan... ...
分类:
其他好文 时间:
2020-03-20 17:02:29
阅读次数:
107
前言:elasticsearch作为一个基于Lucene的分布式搜索引擎,其搜索功能的强大之处不用多说,而elasticsearch-head作为一个node项目,能够轻松管理elasticsearch的集群配置 安装elasticsearch 1、下载资源包并解压安装 wget https://a ...
分类:
其他好文 时间:
2020-03-20 12:24:53
阅读次数:
53
随着业务负载的不断加重,容器化、虚拟化也成为各类在线应用必须要具备的能力。对于分布式数据库,容器化也是提升快速部署、提高运维效率的一个很好的路径。我们重新优化了Docker部署的方式,帮助大家更快的上手SequoiaDB集群,本文就将介绍基于Docker的SequoiaDB分布式集群快速部署。1.集群配置我们将在六个容器中部署一个多节点,高度可用的SequoiaDB集群,如下所示:(本文以Sequ
分类:
数据库 时间:
2020-03-06 19:23:22
阅读次数:
66