1.官网下载jar包： https://www.apache.org/dyn/closer.lua/flink/flink-1.10.1/flink-1.10.1-bin-scala_2.11.tgz 2.上传jar包并且解压： 3.进入/flink-1.10.1/conf/flink-conf.y ...
分类：
系统相关 时间：
2020-07-16 00:06:51
阅读次数：
96
Flume、Logstash、Filebeat对比 日志采集工具对比 1、Flume简介 Flume的设计宗旨是向Hadoop集群批量导入基于事件的海量数据。系统中最核心的角色是agent，Flume采集系统就是由一个个agent所连接起来形成。每一个agent相当于一个数据传递员，内部有三个组件： ...
分类：
Web程序 时间：
2020-07-15 23:42:18
阅读次数：
161
l HAProxy是什么 HAProxy是一个高性能的开源并且免费的负载均衡软件，可以运行于大部分主流的Linux操作系统上。 HAProxy提供了L4(TCP)和L7(HTTP)两种负载均衡能力，具备丰富的功能。HAProxy的社区非常活跃，版本更新快速， HAProxy性能很高 l HAProx ...
分类：
其他好文 时间：
2020-07-15 23:22:49
阅读次数：
59
背景 目前 机器学习平台 后端采用k8s架构进行GPU和CPU资源的调度和容器编排。总所周知，k8s的后端核心存储使用etcd进行metadata持久化存储。机器学习平台采取[External etcd topology](http://way.xiaojukeji.com/article/Exte ...
分类：
其他好文 时间：
2020-07-15 23:14:34
阅读次数：
90
基于x-pack的用户管理（一） “域”（realms） Elasticsearch安全管理插件通过用户认证、用户授权、加密通信、审计日志、IP过滤等多种手段来保证集群的安全。x-pack的安全插件可以通过用户名密码、证书、令牌和其他多种方法实现用户认证。Elasticsearch支持通过多种服务实 ...
分类：
其他好文 时间：
2020-07-15 23:07:42
阅读次数：
94
普通模式 默认的集群模式，以两个节点（rabbit01、rabbit02）为例来进行说明。对于Queue来说，消息实体只存在于其中一个节点rabbit01（或者rabbit02），rabbit01和rabbit02两个节点仅有相同的元数据，即队列的结构。当消息进入rabbit01节点的Queue后， ...
分类：
其他好文 时间：
2020-07-15 15:35:46
阅读次数：
64
需求背景1.常规情况是访问A域名时对外展示域名信息不变，内容却是B域名的，大部分在多版本发布切换时才有这种的需求2.非常规情况是临时过渡或者域名更换时遗留访问导向3.使用的是腾讯云clb做负载均衡暂不支持自定义请求header头想要的效果访问http或https://xxx.domainold.com时实际上是访问http或https://xxx.domainnew.xom的内容解决方案该方案只支
分类：
其他好文 时间：
2020-07-15 12:54:27
阅读次数：
77
课程内容： 1. 简单的操作一下集群 2. 简单的介绍几个工具（企业） 3. Producer的原理（核心，重点） 4. 简单kafka的代码 5. 介绍里面的核心参数（重点） 消费者原理 --replica-factor 2 --partitions 2我们一般设置分区数，建议是节点的倍数 Pro ...
分类：
其他好文 时间：
2020-07-15 01:03:51
阅读次数：
81
简述 RabbitMQ是流行的开源消息队列系统，本身已经具备了较强的并发处理速度及运行稳定性，然而在大规模的实际应用中，往往还需要使用集群配置来保证系统中消息通信部分的高可用性，并发处理性能及异常恢复能力。这里将介绍一种实用的消息集群架构，以及一种能够快速、高效、可靠地部署并配置消息集群的方式，通过 ...
分类：
其他好文 时间：
2020-07-14 20:09:20
阅读次数：
80
1 什么是集群，什么是分布式 集群：就是具有完整功能的系统群集，一个集群节点坏了，其它节点能照常运行， 这是不是像一个并联电路？一个并联电路节点坏了，其它节点还是能够正常工作的。 分布式：就是把一个大而复杂的业务计算分配到多个业务节点机器上，即多个节点机器构成一个 完整的业务链。一个节点故障，则整个 ...
分类：
编程语言 时间：
2020-07-14 20:07:39
阅读次数：
97
