多源复制的意义1.可以在一个从库上对多个服务器的数据库进行汇总，或者对一个数据库的分库分表进行汇总。2.集约使用从库服务器的硬件资源，毕竟弱一个数据库业务量较小确占用整个服务器资源是不经济的。3.更方便的对个业务库进行数据备份，优化数据库备份脚本编写逻辑拓补图实..
分类：
数据库 时间：
2017-06-09 09:58:48
阅读次数：
206
一、问题的提出 互联网有很多“数据量较大，并发量较大，业务复杂度较高”的业务场景，其典型系统分层架构如下： 服务化分层架构的好处是，服务层屏蔽下游数据层的复杂性，例如缓存、分库分表、存储引擎等存储细节不需要向调用方暴露，而只向上游提供方便的RPC访问接口。当有一些数据层变化的时候，所有的调用方也不需 ...
分类：
其他好文 时间：
2017-06-01 10:34:22
阅读次数：
243
（一）关键问题 1.读写分离 2.分库分表 3.类别 lib库 1）业务直接到数据库，少一层proxy效率更高 2）没有proxy的lvs的单点问题 proxy 1）统一管理所有到数据库的连接，连接复用 2）基础查询功能抽象，减少代码耦合 3）易于实现监控、数据迁移、连接管理等功能 （二）shard ...
分类：
数据库 时间：
2017-05-30 19:46:42
阅读次数：
358
一、全局序列号 全局序列号是MyCAT提供的一个新功能，为了实现分库分表情况下，表的主键是全局唯一，而默认的MySQL的自增长主键无法满足这个要求。全局序列号的语法符合标准SQL规范，其格式为：next value for MYCATSEQ_XXXMYCATSEQ_XXX 是序列号的名字，MyCAT ...
分类：
数据库 时间：
2017-05-14 01:15:16
阅读次数：
1013
上篇博文中，我们横向对比了业界主流的分布式数据访问服务，可以说是各有所长： 分布式数据访问服务之1—华山论剑篇 在数据库分库分表实现横向伸缩后，数据的综合查询、分析，业界都有哪些解决方案？这是一个值得研究和讨论的主题。 所以，本篇文章中继续研究分库分表后的数据库综合查询和实时分析技术。 去年我们参加 ...
分类：
其他好文 时间：
2017-05-12 09:32:40
阅读次数：
248
一般使用LVS+PHP集群（1000台），就算日均80亿次请求，每秒有10万并发，那分到每台机器的请求只有100个。只要你的PHP程序不是太差，100QPS总没问题吧？ 而真正的瓶颈在于数据库和存储系统，数据的一致性，可扩展性，可用性很难保证。所以需要根据具体的业务场景再做横向和纵向的分库分表。 再 ...
分类：
Web程序 时间：
2017-05-11 11:35:52
阅读次数：
178
一、mysql数据库的安装分别在master和slave上源码安装mysql数据库1.1安装相关包1.1.1cmake软件cd/home/oldboy/tools/tarxfcmake-2.8.8.tar.gzcdcmake-2.8.8./configure#CMakehasbootstrapped.Nowrungmake.gmakegmakeinstallcd../1.1.2依赖包yuminstallncurses-devel-y1.2开始安..
分类：
数据库 时间：
2017-05-08 18:44:37
阅读次数：
246
1 创建数据库 使用mysql数据库。 在互联网行业的项目中尽可能的减少表的关联查询。使用冗余解决表的关联问题。有利于分库分表。 用户表： Sku：最小库存量单位。就是商品id。就是商品最细力度的划分。每个sku都唯一对应一款商品，商品的颜色、配置都已经唯一确定。 ...
分类：
其他好文 时间：
2017-05-07 22:06:41
阅读次数：
233
http://zhengdl126.iteye.com/blog/419850 第1章 引言 随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的 互联网应用，每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提 ...
分类：
数据库 时间：
2017-05-06 11:47:40
阅读次数：
240
以下摘自http://www.tvtv223.com/so/8/default/8.html#36-数据库的分库分表mycat java技术栈 参考了众多资料，这里就不再详细列举了，可以自行去搜索 1 java基础： 1.1 算法 1.1 排序算法：直接插入排序、希尔排序、冒泡排序、快速排序、直接选 ...
分类：
编程语言 时间：
2017-05-05 15:30:14
阅读次数：
327
