Hadoop分布式文件系统HDFSHadoopDistributedFilesystem分布式文件系统：当数据集大到超过一台独立的计算机存储能力时，就需要存储到若干台单独的计算机上，管理网络中跨多台计算机存储的文件系统称为分布式文件系统。分布式文件系统复杂性：需要考虑节点故障、不丢失任何数据。..
分类：
其他好文 时间：
2015-10-09 18:29:00
阅读次数：
153
HDFS:1、分布式文件系统：管理网络中跨多台计算机存储的文件系统2、hadoop定义了一个抽象文件系统概念，具体就是一个java抽象类：org.apache.hadoop.fs.FileSystm，只要某个文件系统实现了该接口，就可以作为hadoop支持的文件系统3、数据块：hdfs中默认存储是6...
分类：
其他好文 时间：
2015-10-08 14:40:16
阅读次数：
188
1、打开“DFS管理”右击域命名空间，选择“新建文件夹”；2、打开“新建文件夹”对话框，在名称对话框，输入文件夹名称，然后选择“添加”；3、打开“添加文件夹目标”对话框，选择“浏览”；4、选择想要添加的文件夹，选择“确定”；5、返回“添加文件夹目标”对话框，选择“..
分类：
其他好文 时间：
2015-10-03 19:33:27
阅读次数：
244
大型网站架构的演化历程1、网站初始架构2、应用于数据分离（应用程序，文件系统，数据库系统）3、使用缓存4、应用服务器集群5、数据库读写分离6、CDN和反向代理7、分布式数据库系统和分布式文件系统8、nosql和搜索引擎9、业务拆分10、分布式服务
分类：
Web程序 时间：
2015-10-01 19:15:19
阅读次数：
175
一、大数据1、什么是大数据大数据是指无法在一定时间内用常规软件工具对其内容进行抓娶管理和处理的数据集合。大数据技术，是指从各种各样类型的数据中，快速获得有价值信息的能力。适用于大数据的技术，包括大规模并行处理（MPP）数据库，数据挖掘电网，分布式文件系统，分布..
分类：
其他好文 时间：
2015-09-30 01:06:59
阅读次数：
309
初探oVirt-使用小结FAQ2015/9/28time18:52
【Q1】：执行virsh命令时，会提示需要用户验证（Pleaseenteryourauthenticationname），看错误提示似乎和配置vdsm服务后，使用了SASL有关系，怎么解决？
A：使用工具“saslpasswd2-setauser’ssaslpassword”来创建用户。
问题发生时..
分类：
其他好文 时间：
2015-09-29 01:28:32
阅读次数：
2049
GFS捕捉一些业务场景的分布式文件系统的需求。很自然。此外还有一些与他们一些业务或依赖于文件系统是不那么容易，他们需要一个分布式数据库系统。BigTable那是，Google结构化数据处理的需求而产生的。论文摘要涉及的“关键”字为：1. 结构化数据2. 数据量大3. 典型应用：Web索引，Googl...
分类：
其他好文 时间：
2015-09-25 09:37:20
阅读次数：
186
初探GlusterFS-测试卷的类型一、、准备工作
1、物理机3台
增加IP映射到hosts文件：
192.168.20.72node72
192.168.20.73node73
192.168.20.86node86
2、分区
[root@node72~]#yuminstalllvm2xfsprogs-y
[root@node72~]#pvcreate/dev/sdb
[root@node72~]#vgcreatevg0/dev/sdb
[ro..
分类：
其他好文 时间：
2015-09-25 04:07:57
阅读次数：
320
1.TFS（Team Foundation Server）（1）定义：TFS是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统，主要针对海量的非结构化数据， 它构筑在普通的Linux机器集群上，可为外部提供高可靠和高并发的存储访问。（2）优点：它采用了HA架构和平滑扩...
分类：
其他好文 时间：
2015-09-21 19:28:08
阅读次数：
174
日期：2015/9/2-2015/9/17time14:51主机：node86,node92,node93,node72,node73,vm172目的：测试虚拟化管理平台-oVirt操作内容：
一、基础环境
1、使用5台物理机来测试：node86,node92,node93,node72,node73
CPU：Intel(R)Xeon(R)CPUE5-2603v2@1.80GHz
内存：32G
硬盘：48T(4Tx1..
分类：
其他好文 时间：
2015-09-17 15:23:45
阅读次数：
2571
