近年来的大数据应用特别热，特别是Hadoop和Spark。但大家使用这些分布式文件系统和计算框架都需要一个分布式的集群环境，而大家手头一般没有多余的机器部署master和多个slave节点，就只能在VMware上多安装几个虚拟机来模拟集群的搭建，但是安装好一台虚拟机后，我想大部分的人都不想再耗时再重...
分类：
其他好文 时间：
2014-08-02 01:49:52
阅读次数：
267
Hadoop实例视频教程-深入浅出Hadoop实战开发Hadoop是什么，为什么要学习Hadoop?Hadoop是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hado...
分类：
其他好文 时间：
2014-07-31 16:35:06
阅读次数：
177
glusterfs文件系统是一个分布式的文件系统，但是与很多分布式文件系统不一样，它没有元数服务器，听说swift上也是应用了这个技术的。glusterfs中每个xlator的配置信息都是用dict进行管理的。dict这玩意儿，说白了就是一个hash表，是一个key/value的内存数据库。今天.....
分类：
其他好文 时间：
2014-07-31 16:24:47
阅读次数：
229
Hadoop学习笔记(6) ——重新认识Hadoop 之前，我们把hadoop从下载包部署到编写了helloworld，看到了结果。现是得开始稍微更深入地了解hadoop了。 Hadoop包含了两大功能DFS和MapReduce， DFS可以理解为一个分布式文件系统，存储而已，所以这里暂时就不深入....
分类：
其他好文 时间：
2014-07-30 09:44:03
阅读次数：
344
1管理服务器(master-server):负责各个数据存储服务器的管理,文件读写调度,文件空间回收以及恢复.多节点拷贝2元数据日志服务器(changelog-server):负责备份master服务器的变化，（一般情况下可以和管理服务器放在一起）文件类型为changelog_ml.*.mfs，以便于在masterserver出问..
分类：
其他好文 时间：
2014-07-29 15:49:34
阅读次数：
352
部署环境：centos６，jetty９，jdk1.7证书为第三方机构提供的认证证书1.修改etc/jetty-https.xml<Setname="port"><Propertyname="https.port"default="443"/></Set>为<Setname="port"><Propertyname="https.port"default="8443"/></Set>2...
分类：
其他好文 时间：
2014-07-29 15:25:30
阅读次数：
431
一、linux主要的文件系统类型①ext(2/3/4)xfsffsufsjfsvfatntfs②交换文件系统swap③网络文件系统nfssmbfs④分布式文件系统ceph⑤光盘文件系统isso9660linux最传统的文件系统是使用的EXT，所以要了解linux的文件系统，首先从ext开始。ext有ext2、ext3、ext4等ext2不支持日志功..
分类：
系统相关 时间：
2014-07-28 16:47:14
阅读次数：
326
magento是基于php开发，在本地安装magento首先要有php能运行的环境，这里推荐wampServer或者xampp，两者我都试过，个人感觉wampServer比较好用，建议去官网下载最新版本以免因为版本问题导致各种错误，因为我测试过程中就碰到过 ╮(╯▽╰)╭。进入magento官网有安...
分类：
其他好文 时间：
2014-07-27 10:51:32
阅读次数：
553
去年有出一个python整的LAMP自动安装,不过比较傻，直接调用的yum去安装了XXX...不过这次一样有用shell..我也想如何不调用shell来弄一个LAMP自动安装部署啥啥的..不过尼玛智商有限，没搞定，暂且分享一下
先说说目前的缺陷这个脚本总体来说是调用一个字典，组成这个字典是最花..
分类：
编程语言 时间：
2014-07-26 15:36:23
阅读次数：
373
去年有出一个python整的LAMP自动安装,不过比较傻，直接调用的yum 去安装了XXX...不过这次一样有用shell..我也想如何不调用shell 来弄一个LAMP自动安装部署啥啥的..不过尼玛智商有限，没搞定，暂且分享一下 先说说目前的缺陷 这个脚本总体来说是调用一个字典，组成这个字典...
分类：
编程语言 时间：
2014-07-26 09:51:07
阅读次数：
434
