logstash7.10安装机器初始化参考ES安装，安装java，关闭防火墙，selinux等下载并安装GPG-KEYsudorpm--importhttps://artifacts.elastic.co/GPG-KEY-elasticsearch添加yum仓库vim/etc/yum.repos.d/logstash.repo[logstash-7.x]name=Elasticrepository
分类：
其他好文 时间：
2020-12-22 11:48:50
阅读次数：
0
图源：unsplashIf-Else语句我们再熟悉不过了，你可能看过无数的相关教程，读过很多编程书籍，来提升将If-Else用作defacto分支技术的方法，甚至可能你的默认模式就是使用If-Else。可以结束这一切了。在任何新的条件要求下，使用If-Else都会增加复杂性。用状态对象来代替If-Else吧。应用状态模式，你只需使用专用状态对象而无需使用If-Else语句来更改对象行为。像下面这样
分类：
其他好文 时间：
2020-12-22 11:45:27
阅读次数：
0
grep命令 grep命令用于查找文件里符合条件的字符串，如果发现某文件的内容符合所指定的模式，grep命令会把含有模式的那一行显示出来。若不指定任何文件名称，或是所给予的文件名为-，则grep指令会从标准输入设备读取数据。 语法 grep [OPTION]... PATTERN [FILE]... ...
分类：
其他好文 时间：
2020-12-21 11:47:01
阅读次数：
0
基本介绍 1）状态模式（State Pattern):它主要用来解决对象在多种状态转换时，需要对外输出不同的行为的问题。状态和行为是一一对应的，状态之间可以相互转换 2）当一个对象的内在状态改变时，允许改变其行为，这个对象看起来像是改变了其类 uml类图 类图解释 1）Context 类为环境角色， ...
分类：
其他好文 时间：
2020-12-19 13:11:03
阅读次数：
2
Tutorial地址:http://gazebosim.org/tutorials?cat=sensors 1.给各种传感器加噪声，模拟真实模型 2.接触传感器，探测碰撞，并返回碰撞力的位置，可以成插件，也可以与ROS话题发布 3.可以添加相机的畸变 4.使用相机拍摄视频，保存到本地（以图片形式）， ...
分类：
其他好文 时间：
2020-12-19 13:08:06
阅读次数：
2
1 driver='未知司机(16.0)张三(7.0)' 2 3 #仅保留司机姓名 4 pattern=r'\(\d+.\d+\)' 5 print(re.split(pattern,driver)) #return ['未知司机', '张三', ''] 6 7 #仅保留司机趟次 8 9 patte ...
分类：
编程语言 时间：
2020-12-17 12:46:02
阅读次数：
1
1、ELK部署 ELK是elasticsearch、kibana、Logstash组合而成的整套解决方案，前面我们使用skywalking时候已经部署好elasticsearch(参见上一篇随笔)，接下来只需要安装Logstash和kibana即可 1.1、安装kibana 前面使用的elastic ...
分类：
Web程序 时间：
2020-12-16 13:01:27
阅读次数：
10
0、题记实际业务场景中，会遇到基础数据存在Mysql中，实时写入数据量比较大的情景。迁移至kafka是一种比较好的业务选型方案。而mysql写入kafka的选型方案有：方案一：logstash_output_kafka插件。方案二：kafka_connector。方案三：debezium插件。方案四：flume。方案五：其他类似方案。其中：debezium和flume是基于mysqlbinlog实
分类：
数据库 时间：
2020-12-15 12:34:47
阅读次数：
9
题记来自Elasticsearch中文社区的问题——MySQL中表无唯一递增字段，也无唯一递增时间字段，该怎么使用logstash实现MySQL实时增量导数据到es中？logstash和kafka_connector都仅支持基于自增id或者时间戳更新的方式增量同步数据。回到问题本身：如果库表里没有相关字段，该如何处理呢？本文给出相关探讨和解决方案。1、binlog认知1.1啥是binlog？bin
分类：
数据库 时间：
2020-12-15 12:28:58
阅读次数：
5
题记关系型数据库Mysql/Oracle增量同步Elasticsearch是持续关注的问题，也是社区、QQ群等讨论最多的问题之一。问题包含但不限于：1、Mysql如何同步到Elasticsearch?2、Logstash、kafka_connector、canal选型有什么不同，如何取舍？3、能实现同步增删改查吗？.....本文给出答案。1、Canal同步1.1canal官方已支持Mysql同步E
分类：
数据库 时间：
2020-12-15 12:28:41
阅读次数：
4
