前提条件： 数据库容量上亿级别，索引只有id，没有创建时间索引 达到目标： 把阿里云RDS Mysql表数据同步到hive中，按照mysql表数据的创建时间日期格式分区，每天一个分区方便查询 每天运行crontab定时的增量备份数据，还是依据自增的id 遇到的问题： 没法建立创建时间的索引，不能按时 ...
分类：
数据库 时间：
2018-05-01 01:03:50
阅读次数：
1209
典型数据库架构设计与实践 1). 单库架构 2). 分组架构 什么是分组？ 答：分组架构是最常见的一主多从，主从同步，读写分离数据库架构： user-service：依旧是用户中心服务 user-db-M(master)：主库，提供数据库写服务 user-db-S(slave)：从库，提供数据库读服 ...
分类：
数据库 时间：
2018-04-21 23:38:21
阅读次数：
356
当前较为流行的几种源代码管理工具的优缺点比较分析: 工具 优点 缺点 SVN 1、对中文支持好，使用界面统一，管理方便，逻辑明确，符合一般人思维习惯。 2、易于管理，集中式服务器更能保证安全性。 3、代码一致性非常高。 4、适合开发人数不多的项目开发。 1、服务器压力太大，数据库容量暴增。 2、如果 ...
分类：
其他好文 时间：
2018-03-25 15:47:47
阅读次数：
138
几种源代码管理工具分析： 1、管理方便，集中式服务器更能保证安全性，逻辑明确，符合一般人思维习惯 2、代码一致性非常高 3、适合开发人数不多的项目开发 4、允许一个文件有任意多的可命名属性，会关注所有的文件类型 5、支持二进制文件，更容易处理大文件 6、支持空目录 1、服务器压力太大，数据库容量暴增 ...
分类：
其他好文 时间：
2018-03-24 00:34:49
阅读次数：
196
当前较为流行的几种源代码管理工具的优缺点比较分析: 工具 优点 缺点 SVN 1、对中文支持好，使用界面统一，管理方便，逻辑明确，符合一般人思维习惯。 2、易于管理，集中式服务器更能保证安全性。 3、代码一致性非常高。 4、适合开发人数不多的项目开发。 1、服务器压力太大，数据库容量暴增。 2、如果 ...
分类：
其他好文 时间：
2018-03-20 18:12:58
阅读次数：
168
Lepus(天兔)数据库企业监控系统是一套由专业DBA针对互联网企业开发的一款专业、强大的企业数据库监控管理系统，企业通过Lepus可以对数据库的实时健康和各种性能指标进行全方位的监控。目前已经支持MySQL、Oracle、MongoDB、Redis数据库的全面监控. Lepus可以在数据库出现故障或者潜在性能问题时,根据用户设置及时将数据库的异常进行报警通知到数据库管理员进行处理和优化,帮助企业解决数据库性能监控问题，及时发现性能和瓶颈,避免由数据库潜在问题造成的直接经济损失。Lepus能够查看各种实时性能状态指标，并且对监控、性能数据进行统计分析，从运维者到决策者多个层面的视角，查看相关报表。帮助决策者对未来数据库容量进行更好的规划，从而降低了硬件成本。
分类：
其他好文 时间：
2018-02-26 13:30:24
阅读次数：
192
SVN概念：SVN是一个跨平台的开源版本控制系统，SVN会备份并记录每个文件每一次的修改更新变动。我们可以回滚到旧的版本。端口：3690使用方法：先从中央库checkout，然后修改自己的代码后在commit备份：需要备份所有代码以及所有更改的版本记录。缺点：1、当无法连接到中央版本库的环境下，你无法提交代码，看不到代码的历史版本。2、每次提交都保留原始副本，因此数据库容量会暴增3、不适合开源系统
分类：
其他好文 时间：
2018-01-22 00:05:07
阅读次数：
174
本文介绍如何用PowerShell脚本实现SQLServer数据库容量监控闲话就不多说，直入主题一、建表为每台服务器创建一个表，用于记录服务器各个数据库的容量，以服务器名作为表名。CREATETABLEtable_name(
[LOG_DATE][varchar](20)NULL,
[DB_NAME][varchar](50)NULL,
[TOTAL_SIZE_MB][..
分类：
数据库 时间：
2017-11-08 20:03:22
阅读次数：
390
Redis 是一个基于内存的高性能key-value数据库。 redis好处：1.速度快，因为数据在内存中；2.支持丰富的数据类型 （String,list,set）3.支持事务，原子性；4.有很丰富的特性 可用于缓存消息等 Redis的主要缺点是数据库容量受到物理内存的限制，不能用作海量数据的高性 ...
分类：
其他好文 时间：
2017-09-07 20:18:47
阅读次数：
124
转载：http://www.cnblogs.com/VipBin/archive/2011/07/12/2104690.html 在大容量，高负荷的web系统中，对数据库进行一系列拆分，可有效提升数据库容量和性能。在初学程序的早期，程序员通常都喜欢按传统数据库设计模式，设计为单库和单一功能表的结构， ...
分类：
数据库 时间：
2017-06-24 13:55:02
阅读次数：
212
