HDFS权限问题Win下Eclipse提交hadoop程序出错：org.apache.hadoop.security.AccessControlException: Permission denied: user=mango, access=WRITE描述：在window下使用Eclipse进行ha...
分类：
其他好文 时间：
2014-10-10 01:58:53
阅读次数：
138
这里只考虑flume本身的一些东西，对于JVM、HDFS、HBase等得暂不涉及。。。。一、关于Source： 1、spool-source：适合静态文件，即文件本身不是动态变化的； 2、avro source可以适当提高线程数量来提高此source性能； 3、ThriftSource在使用时...
分类：
其他好文 时间：
2014-10-09 19:29:07
阅读次数：
292
用HDFS存储小文件是不经济的，因为每个文件都存在一个block里，每个block的metadata又在namenode的内存里存着，所以，大量的小文件，会吃掉大量的namenode的内存。（注意：一个小文件占用一个block，但是这个block的大小不是设定的值，比如设定每个block是128M，但是一个1M的文件存在一个block里，实际占用的datanode的硬盘大小是1M，而不是128M。...
分类：
其他好文 时间：
2014-10-09 16:58:40
阅读次数：
247
Elastic Utility Computing Architecture for Linking Your Programs To Useful Systems（Eucalyptus）是一种开源的软件基础结构，用来通过计算集群或工作站群实现弹性的、实用的云计算。它最初是美国加利福尼亚大学 Sa....
分类：
其他好文 时间：
2014-10-08 23:18:17
阅读次数：
223
本文描述如何设置一个单一节点的 Hadoop 安装，以便您可以快速执行简单的操作，使用 Hadoop MapReduce 和 Hadoop 分布式文件系统 (HDFS)。...
分类：
其他好文 时间：
2014-10-07 19:00:13
阅读次数：
235
cd/hoperunln-shadoop-0.20.2hadoopln-sjdk1.6.0_21jdkvi/hadoop/conf/hadoop-env.shexportJAVA_HOME=/hoperun/jdkvi/hadoop/conf/core-site.xml<property><name>fs.default.name</name><value>hdfs://localhost:9000</value></property>v..
分类：
其他好文 时间：
2014-10-06 23:42:03
阅读次数：
217
http://www.asp.net/web-forms/tutorials/data-access/caching-data/caching-data-in-the-architecture-cs参考：深入System.Web.Caching命名空间 教你Hold住缓存管理(一)http://ww...
分类：
其他好文 时间：
2014-10-06 22:09:20
阅读次数：
158
reactor设计模式，是一种基于事件驱动的设计模式。《Pattern-Oriented Software Architecture, Volume 2》对这个模式做了具体的解说。这个模式的结构图例如以下：图中的handle相应的是操作系统提供的句柄，比如I/O句柄，Event_Handler类持有...
分类：
其他好文 时间：
2014-10-05 21:32:08
阅读次数：
220
kunen.org home OpenGL nve uC links Building the GNU ARM Toolchain for Bare Metal This is a quick guide to building the GCC toolchain for the ARM architecture.? I wrote this to cleanup some other i...
分类：
其他好文 时间：
2014-10-04 20:12:17
阅读次数：
466
