1、分库分表很明显，一个主表（也就是很重要的表，例如用户表）无限制的增长势必严重影响性能，分库与分表是一个很不错的解决途径，也就是性能优化途径，现在的案例是我们有一个1000多万条记录的用户表members,查询起来非常之慢，同事的做法是将其散列到100个表中，分别从members0到members...
分类：
数据库 时间：
2015-01-04 19:04:03
阅读次数：
198
前言，目前已经有很多mysql中间层，baidu的 dbproxy,taobao的 tddl ,126 ,alibaba的 corba,360的altas ,mysql-proxy,楼方鑫的oneproxy,sohu的dbproxy,fabric等。有的支持分库分表，有的不支持。选择一款合适的就好。但是，如果做技术选型，还是要谨慎小心。选择自主研发还是用现有的第三方产品要慎重。(把libevent...
分类：
数据库 时间：
2014-12-27 19:01:45
阅读次数：
437
随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的 互联网应用，每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提高网站性能，横向扩展数据层 已经成为架构研发人员首选的方式。...
分类：
数据库 时间：
2014-12-26 13:02:34
阅读次数：
258
一、目录需求问题解决方案二、需求现在有接近Z台分布式数据库服务器，M台汇总数据库。当前需要将Z台数据库中的每个数据库中的关键性数据同步到汇总数据库上。汇总数据库上的数据要求：实时，准确。三、问题：当前的数据库架构或者设计在后期就会出现它的疲态。比如，当前有一亿条数据，这些数据分为A类，B类，C类等等...
分类：
其他好文 时间：
2014-12-23 19:12:21
阅读次数：
176
mkdir/server/scriptcd/server/scriptvimysql_backup_db.sh#!/bin/shmysql_backup_dir=/data/mysql_backup/$(date+%F)[!-d${mysql_backup_dir}]&&mkdir-p${mysql_backup_dir}user_pass=‘-uroot-pyeqing‘mysql_login=`mysql${user_pass}-e"showdatabases"|sed‘1,2d‘`for..
分类：
系统相关 时间：
2014-12-15 06:40:43
阅读次数：
213
经典案例：1：在memcache中分key存储。主机分布式选择主机的算法一：利用crc32散列 > 16 & 0xffff; return sprintf("%02s",$hash % $n); } ?>二：当用户数量太多（如达到千万级别），数量量太大时，我们会根据用户名us...
分类：
编程语言 时间：
2014-12-13 12:11:10
阅读次数：
166
前言数据在分片时，典型的是分库分表，就有一个全局ID生成的问题。单纯的生成全局ID并不是什么难题，但是生成的ID通常要满足分片的一些要求：不能有单点故障。以时间为序，或者ID里包含时间。这样一是可以少一个索引，二是冷热数据容易分离。可以控制ShardingId。比如某一个用户的文章要放在同一个分片内...
分类：
其他好文 时间：
2014-12-13 06:07:09
阅读次数：
174
当团队对系统业务和数据库进行了细致的梳理，确定了切分方案后，接下来的问题就是如何去实现切分方案了，目前在sharding方面有不少的开源框架和产品可供参考，同时很多团队也会选择自主开发实现，而不管是选择框架还是自主开发，都会面临一个在哪一层上实现sharding逻辑的问题，本文会对这一系列的问题逐一...
分类：
数据库 时间：
2014-12-13 00:54:13
阅读次数：
347
本文原文连接:http://blog.csdn.net/bluishglc/article/details/7696085,转载请注明出处！本文着重介绍sharding切分策略，如果你对数据库sharding缺少基本的了解，请参考我另一篇从基础理论全面介绍sharding的文章：数据库Shardin...
分类：
数据库 时间：
2014-12-13 00:46:01
阅读次数：
286
作业十二：互联网架构实践：插件式框架P3+dubbo+redis+tbschedule+zookpeer框架和环境搭建（采用京东架构讲解，读写分离，多数据源，分库分表，基础架构spring+velicity+mybatis+p3）
作业十三：centos互联网服务器虚拟机环境搭建实践（nagix、redis、zookper、dubbo、tbschedule）（模拟真实互联网环境服务器环境配置）
作业十四：mysql数据库分库分表分片设计...
分类：
其他好文 时间：
2014-12-10 18:04:27
阅读次数：
238
