大数据和高并发的解决方案汇总 1.3海量数据解决方案 1.使用缓存： 使用方式：1，使用程序直接保存到内存中。主要使用Map，尤其ConcurrentHashMap。 2，使用缓存框架。常用的框架：Ehcache，Memcache，Redis等。 最关键的问题是：什么时候创建缓存，以及其失效机制。 ...
分类：
Web程序 时间：
2018-06-21 17:39:12
阅读次数：
202
一、LVM与RAID特点对比LVMRAIDLVM实现动态扩容RAID支持动态扩容LVM不支持磁盘加速RAID支持磁盘加速LVM不支持冗余（数据备份）RAID支持冗余二、RAID（磁盘冗余阵列）（1）硬件：磁盘阵列卡、磁盘阵列柜（2）软件：mdadm三、RAID级别（1）RAID0：需两块硬盘以上，一般为偶数磁盘数量，磁盘容量为多块磁盘的和（致命缺点：数据无冗余效果），提升磁盘I/O（读取、写入）、
分类：
系统相关 时间：
2018-06-21 17:26:16
阅读次数：
252
一、服务器数据恢复描述先简单介绍一下服务器故障情况；客户的服务器是一台华为OceanStorS5600T型号，服务器位于北京大兴机房，使用MD1200磁盘柜+RAID卡的方式，服务器共有15块硬盘创建了一组RAID5阵列，分配了两个LUN共80T左右，在系统层面对LUN进行了分区划分，分别为sdc1、sdc2和sdc3三个分区，其中sdc1分区大小为4T，通过LVM扩容的方式，将sdc1分区加入到
分类：
其他好文 时间：
2018-06-21 13:35:30
阅读次数：
188
服务器数据恢复背景本次恢复数据的服务器为一台IBMDS4700光纤存储，该公司管理员提供的信息如下：服务器型号为IBMDS4700存储，挂载14块硬盘，存储oracle数据库，两块硬盘报黄灯错误，目前raid组崩溃/卷无法挂载/业务全部瘫痪，需要进行紧急数据恢复处理。服务器数据恢复检测过程服务器数据恢复工程师首先对服务器进行检查，通过IBMstoragemanager/frombyte.com连接
分类：
其他好文 时间：
2018-06-19 17:13:21
阅读次数：
211
Copy From wiki 1. n代表硬盘总数2. JBOD可接到现有硬盘，直接增加容量 RAID 0 RAID 0亦称为带区集。它将两个以上的磁盘并联起来，成为一个大容量的磁盘。在存放数据时，分段后分散存储在这些磁盘中，因为读写时都可以并行处理，所以在所有的级别中，RAID 0的速度是最快的。 ...
分类：
其他好文 时间：
2018-06-18 17:09:27
阅读次数：
186
SSD Firmware开发需要考虑的问题： OP空间选择：OP空间的大小直接关联成本和写放大，OP大则写放大小成本高，OP空间小则写放大大成本低，需要找到一个均衡点； NAND空间的组织管理：如何组织所有空间，粒度是多大；如果划分用户空间和firmware运行使用空间； Raid机制：需要N个lu ...
分类：
其他好文 时间：
2018-06-16 21:45:06
阅读次数：
200
一、AIX的存储层在AIX中，可以直接IO的最底层设备是PV，也就是物理卷，通常在单硬盘环境可以理解为物理磁盘，在挂载的硬件RAID设备上，PV就是RAID卷组(有时候称为逻辑卷，虚拟卷)。PV通常不用来直接存储数据，仅做为VG的成员使用。因PV的大小是随机的，存储时为了效率上的考虑，VG需要有特定的分配颗粒大小，这就又引入了2个存储概念：PP和LP。PP(PhysicalPartition)在创
分类：
其他好文 时间：
2018-06-14 18:43:10
阅读次数：
201
逻辑卷管理前面两章有介绍过分区，但是当磁盘空间不堪重负时，给分区扩容就需要先卸载文件系统，在实际生产中不太方便，所以就用到了逻辑卷。逻辑卷可以在不需要卸载的情况下在线扩容以解决空间不足的问题。逻辑卷大于等于文件系统。一.首先我们来看逻辑卷的创建流程：1.pvcreate/dev/sdb1/dev/sdb2(创建物理卷，可以多块磁盘，raid，分区创建物理卷)pvs或者pvdisplay（查看物理卷
分类：
其他好文 时间：
2018-06-12 16:09:02
阅读次数：
193
ISCSI网络存储服务iscsi实现网络存储，提供存储端叫target，使用存储端叫initiator。target上可以提供存储空间，initiator负责连接ISCSI设备，在ISCSI设备中创建文件系统，以及存取数据，在initiator上看上去是多了一块硬盘。服务器端配置target，准备做为LUN发布的ISCSI的存储设备（可以是一整块磁盘、一个分区、逻辑卷或RAID阵列）。本人事先准备
分类：
系统相关 时间：
2018-06-12 10:22:32
阅读次数：
190
