1. 下载 官网下载:https://dev.mysql.com/downloads/mysql/ 嫌官网网速慢可以加q群,在群文件里下载: 1.下载第一个download 2.解压在自己建的目录(各级目录文件名不能有中文和特殊字符) 2. 初始化MySQL+安装MySQL服务+修改密码 1.以管理 ...
分类:
数据库 时间:
2020-12-15 12:47:16
阅读次数:
8
MySQL binlog日志操作详解 MySQL的二进制日志可以说是MySQL最重要的日志了,它记录了所有的DDL和DML(除了数据查询语句)语句,以事件形式记录,还包含语句所执行的消耗的时间,MySQL的二进制日志是事务安全型的。 binlog日志的作用 其一:MySQL Replication在 ...
分类:
数据库 时间:
2020-12-15 12:43:15
阅读次数:
7
目录 1.1. 关于本手册1.2. 本手册采用的惯例1.3. MySQL AB概述1.4. MySQL数据库管理系统概述1.4.1. MySQL的历史1.4.2. MySQL的的主要特性1.4.3. MySQL稳定性1.4.4. MySQL表最大能达到多少1.4.5. 2000年兼容性1.5. Ma ...
分类:
数据库 时间:
2020-12-15 12:41:03
阅读次数:
7
版本:centos7 技术基础:会使用vi 1.获取地址 要远程连接,要拿到当前Linux的地址 使用如下命令 ip addr 说明网卡没有启动,需要启动网卡并且配置地址,地址可以配置动态ip 也可以配置为静态ip 进入/etc/sysconfig/network-scripts目录下看到如下: 我 ...
分类:
系统相关 时间:
2020-12-15 12:40:35
阅读次数:
6
企业中经常会需要批处理才能处理完成的业务操作,比如:自动化地处理大批量复杂数据,如月结计算;重复性地处理大批量数据,如费率计算;充当内部系统和外部系统的数据纽带,中间需要对数据进行格式化,校验,转换处理等. 1.框架搭建 在pom中导入Spring Batch,Mysql,和JDBC依赖, <?xm ...
分类:
编程语言 时间:
2020-12-15 12:39:06
阅读次数:
4
0、题记实际业务场景中,会遇到基础数据存在Mysql中,实时写入数据量比较大的情景。迁移至kafka是一种比较好的业务选型方案。而mysql写入kafka的选型方案有:方案一:logstash_output_kafka插件。方案二:kafka_connector。方案三:debezium插件。方案四:flume。方案五:其他类似方案。其中:debezium和flume是基于mysqlbinlog实
分类:
数据库 时间:
2020-12-15 12:34:47
阅读次数:
9
0、ES6.X一对多、多对多的数据该如何存储和实现呢?引出问题:“某头条新闻APP”新闻内容和新闻评论是1对多的关系?在ES6.X该如何存储、如何进行高效检索、聚合操作呢?相信阅读本文,你就能得到答案!1、ES6.X新类型Join产生背景Mysql中多表关联,我们可以通过leftjoin或者Join等实现;ES5.X版本,借助父子文档实现多表关联,类似数据库中Join的功能;实现的核心是借助于ES
分类:
其他好文 时间:
2020-12-15 12:30:07
阅读次数:
2
1、题记Elasticsearch有没有类似mysql的distinct的去重功能呢?1)如何去重计数?类似mysql:selectdistinct(count(1))frommy_table;2)如何获取去重结果。类似mysql:SELECTDISTINCTname,ageFROMusers;2、需求1)对ES的检索结果进行去重统计计数。2)对ES的检索结果去重后显示。3、分析1)统计计数需要借
分类:
其他好文 时间:
2020-12-15 12:29:48
阅读次数:
2
1、问题源自星球同学的提问:es如何与hive或mysql结合使用?es不支持事务有什么好的弥补方案吗?2、事务的核心概念如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下ACID四个特性:原子性(Atomicity)原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚,一致性(Consistency)一致性是指事务必须使数据库从一个一致性状态变换到另一个一致性状态,也就是说一个事
分类:
其他好文 时间:
2020-12-15 12:29:15
阅读次数:
3
题记来自Elasticsearch中文社区的问题——MySQL中表无唯一递增字段,也无唯一递增时间字段,该怎么使用logstash实现MySQL实时增量导数据到es中?logstash和kafka_connector都仅支持基于自增id或者时间戳更新的方式增量同步数据。回到问题本身:如果库表里没有相关字段,该如何处理呢?本文给出相关探讨和解决方案。1、binlog认知1.1啥是binlog?bin
分类:
数据库 时间:
2020-12-15 12:28:58
阅读次数:
5