docker runasn@hadoop1:~/Desktop$ docker run --help Usage: docker run [OPTIONS] IMAGE [COMMAND] [ARG...] Run a command in a new container -a, --attach....
分类:
其他好文 时间:
2015-07-29 21:05:41
阅读次数:
263
netstat 用于显示各种网络相关信息,如网络连接,路由表,接口状态 (Interface Statistics),masquerade 连接,多播成员 (Multicast Memberships) 等等grid_hd@hadoop1:~$ netstat -h usage: netstat [...
分类:
Web程序 时间:
2015-07-28 22:33:10
阅读次数:
313
1 protocol buffer sudo apt-get install libprotobuf-dev asn@hadoop1:~/Desktop$ protoc --version libprotoc 2.5.0 2 安装CMake apt-get install cmak...
分类:
系统相关 时间:
2015-07-25 00:02:47
阅读次数:
493
在hadoop1.2.1被预装在一份报告中安装说明java。我装了很多的版本号java以及许多的版本号hadoop,然后发现oracle-java7与hadoop1.2.1能够匹配。一,安装详细过程例如以下:1. 安装java:sudo apt-get install oracle-java7-in...
分类:
系统相关 时间:
2015-07-23 15:19:50
阅读次数:
164
hadoop2概述 hadoop1和hadoop2的结构比较: hadoop1中有HDFS和MapReduce.HDFS负责存储,MapReduce负责计算,但是有几个问题需要解决: 1.单点的问题.HDFS的namenode和MapReduce的jobTracker...
分类:
其他好文 时间:
2015-07-09 06:19:08
阅读次数:
170
在hadoop2.0中,datanode数据副本存放磁盘选择策略有两种方式:第一种是沿用hadoop1.0的磁盘目录轮询方式,实现类:RoundRobinVolumeChoosingPolicy.java第二种是选择可用空间足够多的磁盘方式存储,实现类:AvailableSpaceVolumeCho...
分类:
其他好文 时间:
2015-07-01 17:33:31
阅读次数:
161
关于HBase[hdfs@hadoop1 root]$ hbase
Usage: hbase [] []
Options:
--config DIR Configuration direction to use. Default: ./conf
--hosts HOSTS Override the list in 'regionse...
分类:
其他好文 时间:
2015-06-28 21:39:53
阅读次数:
430
1. Storm是什么,怎么做,如何做的更好?Storm是一个开源的分布式实时计算系统,它可以简单、可靠地处理大量的数据流。Storm有很多应用场景,如实时分析、在线机器学习、持续计算、分布式RPC、ETL,等等。Storm支持水平扩展,具有高容错性,保证每个消息都会得到处理,而且处理速度很快(在一...
分类:
其他好文 时间:
2015-06-28 21:25:04
阅读次数:
233
异常报错1、ssh配置出错,ssh登录 The authenticity of host 192.168.0.xxx can’t be established.用ssh登录一个机器(换过ip地址),提示输入yes后,屏幕不断出现y,只有按ctrl + c结束错误是:The authenticity of host 192.168.0.xxx can’t be established.以前和同事碰到过...
分类:
其他好文 时间:
2015-06-28 12:51:39
阅读次数:
511
基于虚拟机的Hadoop集群安装1、我们需要的软件Xshell, ssh secure, 虚拟机,Linux centos64, Hadoop1.2.1的安装包2、安装以上软件3、安装Linux,此处不多做阐述4、首先安装jdk我的路径是JAVA_HOME=/usr/lib/jvm/jdk1.7.0_79
PATH=PATH:PATH:JAVA_HOME/bin
CLASSPATH=JAVAHO...
分类:
其他好文 时间:
2015-06-28 12:50:45
阅读次数:
132