目的:本文描述怎么安装和配置一个单结点的Hadoop,以便搭建能快速简单操作和使用Hadoop的MapReduce和Hadoop的分布式文件系统(HDFS);先决条件:支持的平台GNU/Linux
可用作开发和生产平台. Hadoop 在GNU/Linux clusters with 2000 no...
分类:
其他好文 时间:
2014-07-22 23:14:55
阅读次数:
435
磁盘调度,简单的讲就是让磁盘工作,并且符合我们的要求的工作!很多初学者可能多磁盘调度和文件系统弄混,其实他们是两个完全不相同的概念。磁盘调度可以说是一个磁盘的驱动系统,由磁盘厂商设计和开发。而文件系统属于操作系统的一部分,它比磁盘调度系统更高一级,他直接面向上层用户。那就说说磁盘的调度过程吧,上图。...
分类:
其他好文 时间:
2014-05-01 14:33:31
阅读次数:
329
Linux有一个高级安全组件,如果开启会输出打了的日志文件messages.如下:导致/var/log/messages
达到11groot@cpp11 ~]# df -l文件系统 1K-块 已用 可用 已用% 挂载点/dev/cciss/c0d0p5 14877060
12559852 15493...
分类:
系统相关 时间:
2014-05-01 13:40:13
阅读次数:
529
实现文件下载有很多方式:1、后台读取文件,返回io流;2、配置tomcat,用户直接连到文件系统中的文件,进行下载,如下配置:在tomcat6版本中:1、【官方文档】本人不推荐。在tomcat\conf下server.xml中找到在其中添加:这的docBase要改成你的项目目录。2、
不修改serv...
分类:
其他好文 时间:
2014-04-30 20:18:15
阅读次数:
475
以下主要讲解了Hadoop的文件读写操作流程:读文件 读文件时内部工作机制参看下图:
客户端通过调用FileSystem对象(对应于HDFS文件系统,调用DistributedFileSystem对象)的open()方法来打开文件(也即图中的第一步),DistributedFileSystem通.....
分类:
其他好文 时间:
2014-04-30 13:39:04
阅读次数:
375
1.Hadoop简介Hadoop[h?du:p]实现了一个分布式文件系统(Hadoop
Distributed File
System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高传输率(high
throughput)来访问应用程序的数...
分类:
其他好文 时间:
2014-04-30 03:17:00
阅读次数:
604
关于Reparse Points找到下面的解释,要是能有更进一步的解释说明就更好了 Reparse
Points其实是一个用户自定义的数据集合,它可以包含在一个文件或目录中。这种格式的数据能够被特定的应用程序(负责存储数据)和文件系统过滤程序(负责解释数据和处理文件)所理解。当一个应用程序设置了一个...
分类:
其他好文 时间:
2014-04-29 22:50:10
阅读次数:
437
用apache的时候总是要进入/var/www,
用久了开始好奇这些个目录都是派什么用处的,简单整理了一下/bin
存放二进制命令文件,这个目录下面不允许存在子目录/boot bootloader的静态文件,当然OS的文件也必须在这里/dev 设备文件,MAKEDEV命令可以创建设备/etc 特定主...
分类:
系统相关 时间:
2014-04-29 13:37:58
阅读次数:
675
引自:http://www.ibm.com/developerworks/cn/linux/l-linux-filesystem/在文件系统方面,Linux?
可以算得上操作系统中的 “瑞士军刀”。Linux 支持许多种文件系统,从日志型文件系统到集群文件系统和加密文件系统。对于使用标准的和比较奇特...
分类:
系统相关 时间:
2014-04-29 10:44:45
阅读次数:
678
今天弱爆了1.再svnRoot下新建你要建的项目名如:hqdj
文件夹,然后选中它点击右键选中create repository
here...,选择文件系统类型2.进入conf文件夹进行配置用户名和密码3.再你自己的本地(最好是www目录下)checkout就ok了想想自己不好好研究下,现在弱爆了...
分类:
其他好文 时间:
2014-04-29 10:35:45
阅读次数:
317