NFS(网络文件系统)它的主要功能是通过网络让不同的主机之间可以彼此共享文件或目录。在企业集群架构的工作场景中，NFS网络文件系统一般被用来存储共享视频，图片附件等静态资源文件（一般把网络用户上传的文件都放到NFS共享里），中小型企业都是用NFS大型企业会用MFS,GFS,FASTFS,TFS等分布式文件系统NFS挂载原理：同样的NFS挂载也是使用mount命令，格式如下：mount远端IP地址:
分类：
其他好文 时间：
2018-09-27 15:27:38
阅读次数：
189
一、MongoDB数据库的特点及安装MongoDB数据库的特点面向文档，模式自由json数据模式（bson）（可以初略理解为字典）多级引索高可用复制集水平扩展跨平台、多种语言接口弱事务类型大数据、高并发、弱事务的web2.0互联网应用。优点：弱一致性，文档格式存储方式，内置gridFS（分布式文件系统）缺点：不支持事务，空间占用大MongoDB数据库的安装安装：一路点击next，finish配置环
分类：
数据库 时间：
2018-09-24 11:25:10
阅读次数：
256
1、什么是hadoop hadoop中有3个核心组件： 分布式文件系统：HDFS —— 实现将文件分布式存储在很多的服务器上 分布式运算编程框架：MAPREDUCE —— 实现在很多机器上分布式并行运算 分布式资源调度平台：YARN —— 帮用户调度大量的mapreduce程序，并合理分配运算资源 ...
分类：
其他好文 时间：
2018-09-22 19:52:16
阅读次数：
169
hadoop入门(一) 一、概述 1.什么是hadoop hadoop不仅是一个用于存储分布式文件系统,还是设计用来在有通用计算设备组成的大型集群上执行的分布式应用的基础框架。 hadoop框架最核心的设计是mapreduce和HDFS 1.2为什么要选择hadoop 1)扩容：能可靠的处理和存储P ...
分类：
其他好文 时间：
2018-09-21 17:38:43
阅读次数：
216
mongo是啥东西？ MongoDB 是由C++语言编写的，基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。 gridfs是啥东西？ MongoDB内置GridFS，支持大容量的存储。 GridFS是一个出色的分布式文件系统，可以支持海量的数据存储。这使得 ...
分类：
其他好文 时间：
2018-09-20 16:03:25
阅读次数：
212
一、Hadoop框架简介Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，则MapReduce为海量的数据提供了计算。HDFS(HadoopDistributionFileSystem)，称为Hadoop分布式文件系统，主要特点：HDFS最小以64MB的数据块存储文件，相比其他文件系统中的4KB~32KB分块大得多。HDFS在时延的基础上对吞吐量进行
分类：
其他好文 时间：
2018-09-17 14:08:20
阅读次数：
181
前言： 一、背景介绍 二、大数据介绍 正文： 一、大数据相关的工作介绍 二、大数据工程师的技能要求 三、大数据学习规划 四、持续学习资源推荐（书籍，博客，网站） 五、项目案例分析（批处理+实时处理） 大数据学习群：119599574 前言 一、背景介绍 本人目前是一名大数据工程师，项目数据50T，日 ...
分类：
其他好文 时间：
2018-09-16 15:44:29
阅读次数：
158
初始Hadoop hadoop概述 查看官网，了解hadoop是一个开源的可靠的可扩展的分布式框架，它有很多的组件，比如Common,HDFS YARN,MapReduce. 1. Common：支持其他Hadoop模块的常用实用程序 2. HDFS：是一个分布式文件系统，提供对应用程序数据的高吞吐 ...
分类：
其他好文 时间：
2018-09-16 15:43:36
阅读次数：
221
Hadoop Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。 HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）来访问应用程序的数据，适合那些有着超大 ...
分类：
其他好文 时间：
2018-09-15 20:50:17
阅读次数：
170
