Hadoop1.0最新稳定版本1.2.1 1.Hadoop Common 2.分布式文件系统HDFS 3.分布式并行计算框架MapReduce Hadoop2.0稳定版本2.2.0 1.Hadoop Common 2.分布式文件系统HDFS 3.分布式并行计算框架MapReduce 4.YARN H
分类:
其他好文 时间:
2016-03-20 21:17:58
阅读次数:
224
ovirt是RHEV的社区版,是一个免费开源的虚拟化软件。它包括管理端和node节点,类似于vsphere和esxi大关系一样。Ovirt中集成了glusterfs分布式存储的管理功能,在图形化界面下友好的管理了glusterfs。下面大概看看它的组成部分:一个Ovirt环境包括:1、主机(host):基于KVM的..
分类:
其他好文 时间:
2016-03-18 02:03:12
阅读次数:
2132
2. 上网调查一下目前流行的源程序版本管理软件和项目管理软件都有哪些?各有什么优缺点? 通过我在网络上的调查,下面是我的调查结果。 TFS(Taobao FileSystem)是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统,主要针对海量的非结构化数据,它构筑在普通的Linux机器集群
分类:
其他好文 时间:
2016-03-17 02:03:33
阅读次数:
204
http://ylw6006.blog.51cto.com/470441/948729/ 由于网站使用nfs共享方式保存用户上传的图片,附件等资料,然后通过apache下载的方式供用户访问,在网站架构初期,使用这种简单的方式实现了静态资源的读写分离,但随着网站数据量的增加,图片服务器渐渐成为整个网站
分类:
其他好文 时间:
2016-03-16 17:07:43
阅读次数:
401
TFS(Taobao FileSystem)是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统,主要针对海量的非结构化数据,它构筑在普通的Linux机器集群上,可为外部提供高可靠和高并发的存储访问。TFS为淘宝提供海量小文件存储,通常文件大小不超过1M,满足了淘宝对小文件存储的需求,被广
分类:
其他好文 时间:
2016-03-16 16:45:37
阅读次数:
188
下面是 StuQ 发布的大数据技能图谱,比较实用,供参考 大数据处理框架 Spark - RDD - Spark SQL - Spark Streaming - MLLibHadoop - HDFS (分布式文件系统) - Mapreduce(计算框架) - Yarn(资源管理平台) - Pig
分类:
其他好文 时间:
2016-03-14 09:28:47
阅读次数:
173
Fastdfs安装教程1、环境操作系统Centos7.0X64最小化安装Track1:192.168.121.131Track2:192.168.121.132Storage1:192.168.121.133Storage1:192.168.121.134FastDFS下载地址https://sourceforge.net/projects/fastdfs/files/?source=navbar2、在Track上安装fastdfs首先,安装依赖..
分类:
其他好文 时间:
2016-03-14 02:01:07
阅读次数:
375
一、Hadoop是什么? Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop框架最核心的设计包含两个方面,一是分布式文件系统(Hadoop Distributed File System),简称HDFS;二是分布式计算框架MapReduce。简单来说,HDFS为海量的数据
分类:
其他好文 时间:
2016-03-11 13:46:40
阅读次数:
186
1.规划: 3.依赖包 yum install libibverbs librdmacm xfsprogs nfs-utils rpcbind libaio liblvm2app lvm2-devel libevent-devel nfs-utils-lib-devel tcl-devel libs
分类:
其他好文 时间:
2016-03-07 16:56:58
阅读次数:
298
Jeesz是一个分布式的框架,提供项目模块化、服务化、热插拔的思想,高度封装安全性的Java EE快速开发平台。 Jeesz本身集成Dubbo服务管控、Zookeeper注册中心、Redis分布式缓存技术、FastDFS分布式文件系统、ActiveMQ异步消息中间件、Nginx负载均衡等分布式技术 ...
分类:
其他好文 时间:
2016-03-05 14:32:00
阅读次数:
3002