shell操作命令：hdfs的路径，在core-site.xml中定义fs.default.namehdfs://master.hadoop:9000 master.hadoop namenode主机名用/ 代替当前绝对路径hadoop fs -ls / 查看hdfs的根目录下的内容hadoop ....
分类：
其他好文 时间：
2014-09-22 18:45:42
阅读次数：
161
Xcode升级到5.1 新特性之一就是默认让所有App都通过64位编译器编译。原来在Xcode5.0.x的时候默认的Standard architectures只有（arm7,armv7s），到5.1之后默认就带上arm64的参数了。目前临时的解决办法是1.把1.选中Targets—>Build S...
分类：
移动开发 时间：
2014-09-22 18:01:32
阅读次数：
163
http://people.ee.duke.edu/~sorin/ece252/lectures/ ECE 252 / CPS 220 Advanced Computer Architecture I Fall 2009 Duke University Prof. Daniel Sorin (sorin@ee.duke.edu) based on slides developed by Pr...
分类：
其他好文 时间：
2014-09-21 15:11:01
阅读次数：
270
HDFS 对外提供了可供访问的http server，开放了很多端口，下面介绍常用的几个端口（http://hadoop：……）。一、50070 端口，查看NameNode 状态，如图1.1所示。图 1.1该端口的定义位于core-default.xml 中，如图1.2所示，读者可以在core-si...
分类：
其他好文 时间：
2014-09-21 11:04:30
阅读次数：
261
这里面说的read既包括get，也包括scan，实际底层来看这两个操作也是一样的。我们将要讨论的是，当我们从一张表读取数据的时候hbase到底是怎么处理的。分二种情况来看，第一种就是表刚创建，所有put的数据还在memstore中，并没有刷新到hdfs上；第二种情况是，该store已经进行多次的fl...
分类：
其他好文 时间：
2014-09-21 00:08:49
阅读次数：
623
一、搭建Hadoop 开发环境 我们在工作中写完的各种代码是在服务器中运行的，HDFS 的操作代码也不例外。在开发阶段，我们使用windows 下的eclipse 作为开发环境，访问运行在虚拟机中的HDFS。也就是通过在本地的eclipse 中的java 代码访问远程linux 中的hdfs。要使....
分类：
编程语言 时间：
2014-09-20 17:17:39
阅读次数：
271
一、RPC（Remote Procedure Call）简介 RPC 是远程过程调用(Remote Procedure Call)，即远程调用其他虚拟机中运行的javaobject。RPC 是一种客户端/服务器模式，那么在使用时包括服务端代码和客户端代码，还有我们调用的远程过程对象。HDFS 的运行...
分类：
其他好文 时间：
2014-09-20 13:30:18
阅读次数：
194
1. HDFS Federation产生背景 在Hadoop 1.0中，HDFS的单NameNode设计带来诸多问题，包括单点故障、内存受限制约集群扩展性和缺乏隔离机制（不同业务使用同一个NameNode导致业务相互影响）等，为了解决这些问题，Hadoop 2.0引入了基于共享存储的HA解决方案和H...
分类：
其他好文 时间：
2014-09-19 22:19:46
阅读次数：
542
