简介： 快手基于 Flink 的持续优化与实践的介绍。 一、Flink 稳定性持续优化 第一部分是 Flink 稳定性的持续优化。该部分包括两个方面，第一个方面，主要介绍快手在 Flink Kafka Connector 方面做的一些高可用，是基于内部的双机房读或双机房写和一些容错的策略。第二部分关 ...
分类：
其他好文 时间：
2021-03-05 12:54:40
阅读次数：
0
近日，Hudi社区合并了 Flink 引擎的基础实现（HUDI-1327），这意味着 Hudi 开始支持 Flink 引擎。 当前 Flink 版本的 Hudi 只支持读取 Kafka 数据，sink到 COW 类型的 Hudi 表中，其他功能还在完善。 这里我们简要介绍下如何从 Kafka 读取数 ...
分类：
其他好文 时间：
2021-03-04 13:29:01
阅读次数：
0
Web的基本概念 分为静态web、动态web 静态web：数据不会改变的网站，如html、css 动态web： 数据会改变的网站 技术栈：Servlet/JSP，ASP，PHP Web应用程序 由浏览器加载访问的程序，放置在某个电脑的文件夹中（通常是服务器） web应用由多部分组成（静态web、动态 ...
分类：
编程语言 时间：
2021-03-03 12:15:39
阅读次数：
0
目录 一、Kafka监控的几个指标 二、查看zookeeper配置 三、查看kafka配置 四、查看kafka的group name 五、查看kafka的topic_name 六、修改zabbix配置文件 七、创建监控脚本 八、给脚本和对应文件权限 九、重启zabbix 十、监控上增加3个键值 正文 ...
分类：
其他好文 时间：
2021-03-03 12:11:41
阅读次数：
0
1. 基本概念 1.1前言 web 开发： web，网页的意思 静态 web html，css 提供给所有人看的数据始终不会发生变化 动态 web 几乎所有网站 提供给所有人看的数据始终会发生变化，每个人看到的信息各不相同 技术栈：Servlet/Jsp 在 java 中，动态 web 资源开发的技 ...
分类：
编程语言 时间：
2021-03-02 11:58:22
阅读次数：
0
1.概述 在大数据的浪潮下，时时刻刻都会产生大量的数据。比如社交媒体、博客、电子商务等等，这些数据会以不同的类型存储在不同的平台里面。为了执行ETL（提取、转换、加载）操作，需要一个消息中间件系统，该系统应该是异步和低耦合的，即来自各种存储系统（如HDFS、Cassandra、RDBMS等）的数据可 ...
分类：
其他好文 时间：
2021-03-01 13:50:00
阅读次数：
0
InfluxDB基本概念 1、数据格式 在 InfluxDB 中，我们可以粗略的将要存入的一条数据看作一个虚拟的 key 和其对应的 value(field value)。格式如下： cpu_usage,host=server01,region=us-west value=0.64 14340555 ...
分类：
数据库 时间：
2021-03-01 13:30:25
阅读次数：
0
集群角色： leader：负责事务读写操作， follower：读操作，把写操作交给leader，投票 observer：除了不投票几乎和follower一致 ZXID: 分布式事务id，全局唯一，一般作为事务id使用 会话： 每次服务端连接建立，存在一个会话，和服务端的通讯。一般会创建一个零时节点 ...
分类：
其他好文 时间：
2021-03-01 12:59:32
阅读次数：
0
map基本概念： 简介： -map中所有元素都是pair -pair中第一个元素为key(键值)，起到索引的作用，第二个元素为value(实值) -所有元素都会根据元素的键值自动排序 本质： -map/multimap属于关联式容器，底部是二叉树实现 优点： -可以根据key快速找到value值 m ...
分类：
其他好文 时间：
2021-02-27 13:17:23
阅读次数：
0
现在的mq产品主流有4中：rabbitmq，rocketmq，activemq，kafka；有时候很意外的是：学的其中一个，公司用的又是另外一个，导致学习成本提高。有或者是 业务服务使用rabbitmq，而数据库后台使用kafka，整个项目使用了2种mq，可能会导致切换困难，维护成本高等因素。 我们 ...
分类：
编程语言 时间：
2021-02-27 12:58:02
阅读次数：
0
