1、FastDFS简介1.1 介绍FastDFS是一个开源的，高性能的的分布式文件系统，他主要的功能包括：文件存储，同步和访问，设计基于高可用和负载均衡，FastDFS非常适用于基于文件服务的站点，例如图片分享和视频分享网站。FastDFS它是一个轻量级的开源分布式文件系统，主要解决了大容量的文件存储和高并发访问的问题，文件存取时实现了负载均衡。 支持存储服务器在线扩容,支持相同的文件只
分类：
其他好文 时间：
2017-12-27 14:24:55
阅读次数：
211
本篇主要讲述了如何在CentOS7下部署Hadoop，包括了Hadoop运行的支持组件以及Hadoop的配置，并简单介绍了一下HDFS这个分布式文件系统的命令及用法，最后通过运行简单的MapReduce示例来演示如何运行MapReduce程序。
分类：
系统相关 时间：
2017-12-26 17:45:45
阅读次数：
538
NFS是什么？ 网络文件系统，又叫共享存储，通过网络连接让不同主机之间实现共享存储。 应用于存放图片、附件、视频等用户上传文件 相关同类应用：大型网站nfs有压力，使用moosefs（mfs），GhusterFS、FastDFS NFS挂载和普通分区挂载有什么区别？ df -h 或 cat /pro ...
分类：
系统相关 时间：
2017-12-24 14:46:14
阅读次数：
248
1，Hadoop的组成 两个核心组成 HDFS: 分布式文件系统，存储海量的数据 MapReduce: 并行处理框架，实现任务分解和调度 2，HDFS HDFS中的文件被分成块进行存储，默认的块大小为64MB, 块是文件存储处理的逻辑单元 HDFS中有两类节点 NameNode和DataNode 2 ...
分类：
其他好文 时间：
2017-12-23 19:08:04
阅读次数：
159
本节内容： Http协议 Tomcat服务器 下面开始的一系列内容都是JavaEE的内容，主要的内容见下图。JavaEE主要是做服务器端开发。 JavaEE全部规范：有13门技术，主要做web开发的需要学习servlet和jsp。其他技术，像EJB、 JNDI、JSM现在用的少。 一、Http协议 ...
分类：
Web程序 时间：
2017-12-20 13:55:07
阅读次数：
287
概述：Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错 ...
分类：
其他好文 时间：
2017-12-19 01:02:50
阅读次数：
107
简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性 ...
分类：
其他好文 时间：
2017-12-18 18:42:37
阅读次数：
188
FastDFS是一个轻量级的开源分布式文件系统，主要解决了大容量的文件存储和高并发访问问题，文件存取时实现了负载均衡。FastDFS的特性分组存储，灵活简洁，对等结构，不存在单点。文件ID由FastDFS生成，作为文件访问凭证。FastDFS不需要传统的name server和流行的web server无缝衔接，FastDFS已提供apache和nginx扩展模块。大，中，小文件均可以很好支持，支
分类：
其他好文 时间：
2017-12-16 21:17:26
阅读次数：
163
分布式系统实践 1. 系统设计高频：设计分布式文件系统Google File System https://mp.weixin.qq.com/s/RzPgT4eIEcqFOZM6xmDGpw 摘要: 这篇文章讲gfs的文章我觉得写的特别好, 不是一味的翻译文章, 而是从为什么讲到怎么做, 让我们可以 ...
分类：
其他好文 时间：
2017-12-15 20:54:50
阅读次数：
180
Sqoop Flume HDFS Sqoop用于从结构化数据源，例如，RDBMS导入数据 Flume 用于移动批量流数据到HDFS HDFS使用 Hadoop 生态系统存储数据的分布式文件系统 Sqoop具有连接器的体系结构。连接器知道如何连接到相应的数据源并获取数据 Flume 有一个基于代理的架 ...
分类：
Web程序 时间：
2017-12-13 17:05:24
阅读次数：
242
