登录到服务器上df-i一看/路径下96%而数据目录/data下才用了30%故初步判断生成的数据量正常可能是一些系统产生的文件把根路径占满了于是乎在执行以下命令查看根路径下各个文件夹的文件数foriin/*;doecho$i;find$i|wc-l|sort-nr;done数文件数超过10W的有两个/data我们的数据分区..
分类：
系统相关 时间：
2016-09-08 16:37:01
阅读次数：
234
linux的磁盘容量扩容，基于lvm，即逻辑卷管理。具体是什么请百度，这里不细述。此次操作的目的是为了给已存在的linux主机的其中一个数据分区扩容。环境：esxi5.5虚拟机系统centos7简单来说，扩容这件事分三步一、从esxi中为此虚拟机增加硬盘，并让centos系统识别出此硬盘二、将..
分类：
其他好文 时间：
2016-07-20 19:51:59
阅读次数：
5775
近期需要对数据量较大的表进行数据分区,但是若按照150W条数据进行分区,需要三天创建一个ndf文件,一年120个文件存放在一个文件夹中不方便进行文件管理。经过一下午的查阅资料，将以下两篇文章所提到的内容进行综合利用，实现按照年份和月份进行分类存放的SQL定时数据分区。 使用过程中碰到以下问题： di ...
分类：
数据库 时间：
2016-07-13 20:14:41
阅读次数：
756
转自：http://blog.csdn.net/bullbat/article/details/7318269 作者：bullbat 在前面的《对一个程序在内存中的分析 》中很好的描述了程序在内存中的布局，这里对这个结果做些总结和实验验证。下面以Linux为例（实验结果显示windows上的结果也一 ...
分类：
系统相关 时间：
2016-07-11 11:54:40
阅读次数：
352
考虑到恢复和磁盘加载到内存的速度，单个TimesTen数据库可以缓存的数据一般不超过100G，如果需要缓存的数据较大，一般可以利用多个TimesTen来实现数据分区或分片(Sharding)。
虽然TimesTen有Cache Grid即Global Cache Group的概念，但由于其还不太成熟，一般采用手工分区的方式，即通过应用服务器定向到指定的TimesTen的方式。以下给出了只读和读写数...
分类：
数据库 时间：
2016-06-21 07:02:36
阅读次数：
247
android 全磁盘加密
什么是全磁盘加密？全磁盘加密是使用一个密钥来为android设备上所有的用户数据加密的过程。一旦设备被加密，所有的用户创建的数据都将会在提交的磁盘之前自动加密，在读取之前都会自动解密。Android 5.0中添加了啥创建了快速加密，该加密方式仅仅加密在数据分区中使用块设备的数据来避免第一次启动耗费较长时间。仅仅ext4和f2fs文件系统支持快速加密。在首次启动的...
分类：
移动开发 时间：
2016-02-23 13:23:14
阅读次数：
258
MySQL ClusterMySQL集群一个非共享(shared nothing)、分布式、分区系统，使用同步复制机制提供高可用和高性能。MySQL集群使用的是NDB引擎。NDB存储引擎会在节点间自动进行数据分区，支持并行查询，可以实现读写的扩展。在内部，mysql集群使用同步复制机制，避免单点故障...
分类：
数据库 时间：
2015-12-29 12:34:57
阅读次数：
216
数据库文件过大时就要进行数据分区，就是讲数据库拆分到多个文件组中。已方便数据文件管理，提高数据库的读取效能，多文件组如何进行数据库的备份和还原呢，今天主要做多文件组数据库的备份和还原实验。第一步创建数据库qhw_test 数据库包括一个userinfo 数据表，userinfo数据表根据id做分区 ...
分类：
数据库 时间：
2015-12-08 18:10:01
阅读次数：
259
数据库优化包含以下三部分，数据库自身的优化，数据库表优化，程序操作优化.此文为第一部分 数据库性能优化一：数据库自身优化 优化①：增加次数据文件，设置文件自动增长（粗略数据分区） 1.1：增加次数据文件 从SQLSERVER2005开始，数据库不默认生成NDF数据文件，一般情况下有一个主数...
分类：
数据库 时间：
2015-10-23 16:15:37
阅读次数：
285
RDD简介 在Spark集群背后，有一个非常重要的分布式数据架构，即弹性分布式数据集（Resilient Distributed DataSet，RDD），它是逻辑集中的实体，在集群中的多台集群上进行数据分区。通过对多台机器上不同RDD分区的控制，能够减少机器之间的数据重排（Data Shuffle...
分类：
其他好文 时间：
2015-09-14 00:30:20
阅读次数：
253
