写在前面 记得在自己学习数据库知识的时候特别喜欢看案例,因为优化的手段是容易掌握的,但是整体的优化思想是很难学会的。这也是为什么自己特别喜欢看案例,今天也分享自己做的优化案例。 之前分享过OA系统、HIS系统,今天我们来一个最常见的ERP,ERP系统各行各业都在用,不同行业也有不同的特点,博主在做研 ...
分类:
数据库 时间:
2018-08-09 12:22:50
阅读次数:
203
一、数据处理分类 1. 海量数据处理,按照使用场景主要分为两种类型: 联机事务处理(OLTP) 面向交易的处理系统,其基本特征是原始数据可以立即传送到计算机中心进行处理,并在很短的时间内给出处理结果。简单地说,主要是对数据的插入、修改、删除,所以对事物和实时性要求比较高。 联机分析处理(OLAP) ...
分类:
数据库 时间:
2018-08-07 23:47:51
阅读次数:
243
1、OLTP和OLAP OLTP的全称是 Online Transaction Processing, OLTP主要用传统的关系型数据库来进行事务处理。OLTP最核心的需求是单条记录的高效快速处理,索引技术、分库分表等最根本的诉求就是解决此问题。 OLAP的全称是 Online Analytical ...
分类:
其他好文 时间:
2018-08-07 15:12:06
阅读次数:
144
MyCAT 配置解析 server.xml Mycat的配置文件,设置账号、参数等schema.xml Mycat对应的物理数据库和数据库表的配置rule.xml Mycat分片(分库分表)规则 一 :wrapper.conf --配置jdk wrapper.java.command=D:/Prog ...
分类:
其他好文 时间:
2018-08-06 11:45:32
阅读次数:
148
#改改变量就可以了使用,所以输出信息自动生成mysql_backup.log日志,可查看脚本备份的时间,CentOS 7 MySQL自动备份shell脚本系统环境:CentOS7 64位 MySQL-5.6原理与工具:shell脚本mysqldump程序crontab命令1、新建shell脚本vi /script/mysql_backup.sh#!/bin/bash## MySQL Ba
分类:
数据库 时间:
2018-08-03 16:28:28
阅读次数:
268
问题背景公司是做电商系统的,整个系统搭建在华为云上。系统设计的时候,考虑到后续的用户和订单数量比较大,需要使用一些大数据库的组件。关系型数据库这块,考虑到后续数据量的快速增长,不是直接写入MySQL,而是使用了华为云的分布式数据库中间件DDM。使用了DDM之后,可以在业务不感知的情况下,直接增加MySQL读实例的个数,线性提升读性能。也支持中间件层面的分库分表,提供海量关系型数据库的操作。简直是为
分类:
数据库 时间:
2018-08-02 16:08:23
阅读次数:
209
本文通过大量图片来分解、描述分库、分表以及数据库分区是怎样进行的。 1.sharding前的初始数据分布 在本文中,我打算用高考考生相关信息作为实验数据。请无视表的字段是否符合现实,也请无视表的设计是否符合范式。 3张表: 考生表,存放全国所有高考考生信息,假设34个省、(直辖)市、(自治区、特别行 ...
分类:
其他好文 时间:
2018-07-30 01:05:27
阅读次数:
161
数据库优化思路有如下几个方面: 1、建立索引 2、分库、分表、分区 3、数据库引擎 mysql比较常用的数据库引擎是:innodb 、myisam myisam查询效率比innodb快1-2倍, myisam是表级锁,适用于一次插入多次查询的表,或者是读写分离中读库中的表 innodb是行级锁,适用 ...
分类:
数据库 时间:
2018-07-26 23:45:36
阅读次数:
287
前言: 以前写代码, 关于mysql的分库分表已被中间件服务所支持, 业务代码涉及的sql已规避了这块. 它对扩展友好, 你也不知道到底他分为多少库, 多少表, 一切都是透明的. 不过对于小的团队/工作室而言, 可能就没有那么强大的分布式中间件的基础设施支持了, 而当数据库上去的时候, 分库分表就需 ...
分类:
其他好文 时间:
2018-07-26 19:55:34
阅读次数:
266
摘要:在谈论数据库架构和数据库优化的时候,我们经常会听到“分库分表”、“分片”、“Sharding”…这样的关键词。让人感到高兴的是,这些朋友所服务的公司业务量正在(或者即将面临)高速增长,技术方面也面临着一些挑战。让人感到担忧的是,他们系统真的就需要“分库分表”了吗?“分库分表”有那么容易实践吗? ...
分类:
其他好文 时间:
2018-07-25 14:30:56
阅读次数:
182