HDFS 1 HDFS是什么？ 首先，它是一个文件系统，用于存储文件，通过统一的命名空间——目录树来定位文件 其次，它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色； HDFS是分布式文件系统（多个datanode更亲切点吧） 2 设计思想以及特性 设计思想：分而治之：将大文 ...
分类：
其他好文 时间：
2017-07-20 19:45:46
阅读次数：
128
spark 环境搭建 下载的压缩文件放在~/software/ 解压安装在~/app/ 一：分布式文件系统搭建HDFS 1，下载Hadoop HDFS环境搭建 使用版本：hadoop-2.6.0-cdh5.7.0 下载：wget http://archive.cloudera.com/cdh5/cd ...
分类：
其他好文 时间：
2017-07-18 10:03:51
阅读次数：
163
本文转载自：http://blog.csdn.net/hanmengaidudu/article/details/17099737 一、 PPP移植 各项工作具体说明 向Linux内核添加3G模块的驱动(USB转串口驱动)和PPP协议的支持，然后编译内核并下载到开发板。当然如果之前已经移植好内核,那 ...
分类：
系统相关 时间：
2017-07-15 13:57:09
阅读次数：
252
FastDFS是一个开源的，高性能的的分布式文件系统，他主要的功能包括：文件存储，同步和访问，设计基于高可用和负载均衡，FastDFS非常适用于基于文件服务的站点，例如图片分享和视频分享网站 FastDFS有两个角色：跟踪服务(tracker)和存储服务(storage)，跟踪服务控制，调度文件以... ...
分类：
其他好文 时间：
2017-07-15 11:30:27
阅读次数：
243
《JAVA与模式》之适配器模式 出处 http://www.cnblogs.com/java-my-life/archive/2012/04/13/2442795.html 在阎宏博士的《JAVA与模式》一书中开头是这样描述适配器（Adapter）模式的： 适配器模式把一个类的接口变换成客户端所期待 ...
分类：
编程语言 时间：
2017-07-15 11:14:03
阅读次数：
257
摘要：Hadoop之HDFS文件操作常有两种方式。命令行方式和JavaAPI方式。本文介绍怎样利用这两种方式对HDFS文件进行操作。 关键词：HDFS文件 命令行 Java API HDFS是一种分布式文件系统，为MapReduce这样的框架下的海量数据分布式处理而设计。 Hadoop之HDFS文件 ...
分类：
其他好文 时间：
2017-07-14 21:18:43
阅读次数：
261
愿意了解框架技术或者源码的朋友直接加求求（企鹅）：2042849237欢迎大家一起学习研究相关技术 JEESZ分布式框架--技术介绍文档 【推荐】微服务分布式企业框架 Springmvc+mybatis+shiro+Dubbo+ZooKeeper+Redis+KafKa 企业大型互联网分布式架构{... ...
分类：
其他好文 时间：
2017-07-14 16:30:43
阅读次数：
204
CentOS 7 安装配置分布式文件系统 FastDFS 5.1.1 软件下载：http://download.csdn.net/download/qingchunwuxian1993/9897458 yum-y install net-tools.x86_64 软件下载：http://downlo ...
分类：
其他好文 时间：
2017-07-13 16:14:57
阅读次数：
1594
一、哪写是fuse挂载的文件系统MooseFS、GlusterFS都是基于fuse挂载的，NFS是通过mount挂载。这三款都可以通过统一的测试方式二、测试工具1、sysbench2、timedd三、测试方法1、sysbench测试1.1、安装sysbench#tar-zxvfsysbench-0.4.10.tar.gz
#cdsysbench
#./configure&&..
分类：
其他好文 时间：
2017-07-12 23:29:04
阅读次数：
346
一、地址规划主控服务器MasterServer：192.168.11.100安装Master角色元数据日志服务器MetaLoggerServer：192.168.11.103安装metalogger角色存储服务器ChunkServer：192.168.11.102192.168.11.110安装chunkserver角色客户端Client：192.168.11.111安装mfsmount角色和fuse挂载工..
分类：
其他好文 时间：
2017-07-12 23:27:56
阅读次数：
305
