大数据这个词也许几年前你听着还会觉得陌生，但我相信你现在听到hadoop这个词的时候你应该都会觉得“熟悉”！越来越发现身边从事hadoop开发或者是正在学习hadoop的人变多了。作为一个hadoop入门级的新手，你会觉得哪些地方很难呢？运行环境的搭建恐怕就已经足够让新手头疼。如果每一个发行版hadoop都可以做到像大快DKHadoop那样把各种环境搭建集成到一起，一次安装搞定所有，那对于新手来说
分类：
其他好文 时间：
2018-10-25 22:12:57
阅读次数：
180
HDFS(Hadoop Distributed File System)是Hadoop核心组成之一，是分布式计算中数据存储管理的基础，被设计成适合运行在通用硬件上的分布式文件系统。HDFS架构中有两类节点，一类是NameNode，又叫“元数据节点”，另一类是DataNode，又叫“数据节点”，分别执 ...
分类：
其他好文 时间：
2018-10-22 13:03:39
阅读次数：
177
CPU（Center Processor Unit）中央处理单元 mainboard主板 RAM（random access memory）随机存储器（内存） ROM（Read Only Memory）只读存储器 Floppy Disk软盘 Hard Disk硬盘 CD-ROM光盘驱动器（光驱） m ...
分类：
其他好文 时间：
2018-10-17 14:37:49
阅读次数：
214
0. 参考 HDFS你一定要知道，要考的 大数据开发实战：HDFS和MapReduce优缺点分析 SecondaryNamenode的作用详解 1. HDFS 是什么 HDFS ：一种分布式文件系统，可提供对应用程序数据的高吞吐量访问，解决海量数据存储问题。 2. HDFS 产生的背景 & 设计前提 ...
分类：
其他好文 时间：
2018-10-15 14:58:32
阅读次数：
177
HDFS概述及设计目标 如果让我们自己设计一个分布式文件存储系统，怎么做？ HDFS设计目标 非常巨大的分布式文件系统 运行在普通廉价的硬件上 易扩展，为用户提供性能不错的文件存储系统 HDFS架构 如果让我们自己设计一个分布式文件存储系统，怎么做？ HDFS设计目标 非常巨大的分布式文件系统 运行 ...
分类：
其他好文 时间：
2018-10-13 22:49:15
阅读次数：
205
存储的分类：块存储：硬盘LVMDAS(DirectAttachStorage)是直接连接于主机服务器的一种存储方式，每一台主机服务器有独立的存储设备，每台主机服务器的存储设备无法互通。通常用单一网络环境下且数据交换量不大，性能要求不高的环境下，可以说是一种应用较早的技术实现SAN1、FC-SAN2、IP-SAN分布式存储-CephCeph是开源实现的PB级别的分布式文件系统，其分布式对象存储机制为
分类：
其他好文 时间：
2018-10-12 11:12:19
阅读次数：
148
Flink中支持的BLOB文件类型 jar包 被user classloader使用的jar包 高负荷RPC消息 1. RPC消息长度超出了akka.framesize的大小 2. 在HA摸式中，利用底层分布式文件系统分发单个高负荷RPC消息，比如: TaskDeploymentDescriptor ...
分类：
其他好文 时间：
2018-10-09 19:04:20
阅读次数：
1091
根据公司要求，实施过程大致如下：1部署SVN服务器，为PHP程序员创建repo目录的访问账户，通知程序员可以导入代码2部署nginx服务器3部署PHP服务器4部署MySQL主从服务器，根据程序员的要求创建数据库和表5部署MFS6发布上线实验拓扑图如下：实验环境：源码包链接：https://pan.baidu.com/s/1JONQrVyqH0qMwVzKmwsoxA提取码：0zm8实验过程如下：一
分类：
数据库 时间：
2018-10-09 00:49:46
阅读次数：
303
上一篇文章《部署社交网站（SVN+PHP+NGINX+MYSQL+MFS）》主要讲了SVN群集部署，这篇文章以上篇为基础继续讲解SVN客户端的安装和使用。首先在百度下载SVN客户端并进行安装（安装简单，点击下一步即可）安装完成之后需要重启计算机新建一个空目录script,鼠标右击，可以看到SVN选项，选择Checkout（提取）输入SVN服务器地址输入passwd文件中的授权用户帐号模拟PHP程序
分类：
Web程序 时间：
2018-10-04 11:18:08
阅读次数：
193
