【课程内容】1、Hadoop分布式文件系统(HDFS)2、YARN/MapReduce的工作原理3、如何优化Hadoop机群所需要的硬件配置4、搭建Hadoop机群所需要考虑的网络因素5、Hadoop机群维护和控制6、如何利用Hadoop配置选项进行系统性能调优7、如何利用FairScheduler...
分类:
其他好文 时间:
2014-08-13 14:51:36
阅读次数:
288
MTD,Memory Technology Device即内存技术设备,在Linux内核中,引入MTD层为NOR FLASH和NAND FLASH设备提供统一接口。MTD将文件系统与底层FLASH存储器进行了隔离。如上图所示,MTD设备通常可分为四层,从上到下依次是:设备节点、MTD设备层、MTD原...
分类:
系统相关 时间:
2014-08-13 12:18:56
阅读次数:
310
linux开发板开启telnet服务须要一下几个条件:1.文件系统支持telnetbusybox默认是把telnet和telnetd功能编进去了的,所以这一步一般都省了。2.挂载devpts挂载这个文件系统,须要在dev文件夹下建立pts文件夹,并将它挂载成devpts类型。mkdir /dev/p...
分类:
Web程序 时间:
2014-08-13 10:13:45
阅读次数:
240
1.查看硬盘及分区信息fdisk -l2.查看文件系统的磁盘看空间占用情况df -h3.查看磁盘的io性能iostat -x 1 10iostat是含在套装systat中的,在centos下面可以用命令yum -y install sysstat安装4.查看系统中某个目录的大小du -sh 目录名称...
分类:
其他好文 时间:
2014-08-13 05:55:15
阅读次数:
251
1.首先准备两台主机,一台做服务器,一台做客户机,保证两台能够相互通信服务器IP地址:192.168.4.5客户机IP地址:192.168.4.2052.给服务器配置NFS服务[root@ser5/]#rpm-qnfs-utilsrpcbindnfs-utils-1.2.3-39.el6.x86_64rpcbind-0.2.0-11.el6.x86_64确定这两个软件包已经安装,..
分类:
系统相关 时间:
2014-08-13 03:45:45
阅读次数:
290
一、字体分析1.1.文件系统中字体的位置: /system/fonts/ 其中的ttf文件都是字库对于源码/frameworks/data/fonts/下的字体文件 DroidSans-Bold.ttf 粗体的无衬线字体(拉丁字母等) DroidSans.ttf 常规的无衬线字体(拉丁字母等...
分类:
移动开发 时间:
2014-08-13 00:36:24
阅读次数:
368
Rsync简介rsync 是一个 Unix 系统下的文件同步和传输工具。它具备以下特性:1. 能更新整个目录和树和文件系统2. 有选择性的保持符号链链、硬链接、文件属于、权限、设备以及时间等3. 对于安装来说,无任何特殊权限要求4. 对于多个文件来说,内部流水线减少文件等待的延时5. 能用 rsh、...
分类:
其他好文 时间:
2014-08-12 18:21:14
阅读次数:
285
1. quotacheck [-avugfM] [/mount_point]:扫描文件系统并创建Quota配置文件。参数:-a:扫描所有在/etc/mtab内,含有quota支持的文件系统,加上此参数后,不必写/mount_point;-u:针对用户扫描文件与目录的使用情况,会新建aquota.us...
分类:
系统相关 时间:
2014-08-12 18:15:04
阅读次数:
309
目的
本指南提供一个HDFS HA特性的综述,描述了如何使用QJM配置和管理一个HA HDFS集群。
本文档假设读者对于HDFS中的通用组件和节点类型有一个大体的认识。请参考HDFS架构指南获取更多信息。
注意:使用QJM或者传统的共享存储
本文档讨论了如何用QJM配置和使用HDFS HA在Active NameNode和Standby NameNode共享edit日志文件...
分类:
其他好文 时间:
2014-08-12 17:18:04
阅读次数:
327
NFS是网络文件系统。NFS允许一个系统在网络上与他人共享目录和文件。通过使用NFS,用户和程序可以像访问本地文件一样访问远端系统上的文件。#被挂载机:192.168.1.1#要挂载的目录:/data/img,只允许192.168.1.2挂载/data/logs,允许所有ip挂载#挂载机:192.168.1.2#192.168.1.1和19..
分类:
其他好文 时间:
2014-08-12 13:56:44
阅读次数:
285