码迷,mamicode.com
首页 >  
搜索关键字:hdfs dfsadmin    ( 4996个结果
solution:No job file jar和ClassNotFoundException(hadoop,mapreduce)
solution:No job file jar和ClassNotFoundException(hadoop,mapreduce)解决方案...
分类:编程语言   时间:2014-12-10 18:11:28    阅读次数:300
hdfs统计行数和统计文件大小
hdfs统计文件行数和文件大小命令...
分类:其他好文   时间:2014-12-10 12:41:03    阅读次数:225
hbase监控简单实用脚本
我们以前使用过的对hbase和hdfs进行健康检查,及剩余hdfs容量告警,简单易用 #/bin/bash bin=`dirname $0` bin=`cd $bin;pwd` STATE_OK=0 STATE_WARNING=1 STATE_CRITICAL=2 STATE_UNKNOWN=3 STATE_DEPENDENT=4 source /etc/...
分类:其他好文   时间:2014-12-10 12:40:37    阅读次数:171
hdfs增加ns之后,重启DN报clusterId不匹配错误
在测试环境准备测试FastCopy,因为之前只有一个NS,准备增加一个NS也便于测试,一切都准备妥当之后,重启DN,但是DN死活连接不上新的NN,报以下错误:...
分类:其他好文   时间:2014-12-09 23:09:47    阅读次数:262
Hadoop,HBase,Storm,Spark到底是什么?
Hadoop,HBase,Storm,Spark到底是什么? Hadoop=HDFS+Hive+Pig+......
分类:其他好文   时间:2014-12-09 17:45:22    阅读次数:183
Hadoop学习第三次:HDFS部署
1.HDFS部署
分类:其他好文   时间:2014-12-09 17:12:07    阅读次数:131
datanode 启动不了 原因
查看日志:/home/nbu/xu/hadoop/logs/ vi hadoop-nbu-datanode-hadoop211.log ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible namespaceIDs in /home/nbu/xu/app/had...
分类:其他好文   时间:2014-12-09 15:44:05    阅读次数:137
hbase日常运维管用命令,region管理
1 Hbase日常运维1.1 监控Hbase运行状况1.1.1 操作系统1.1.1.1 IO 群集网络IO,磁盘IO,HDFS IOIO越大说明文件读写操作越多。当IO突然增加时,有可能:1.compact队列较大,集群正在进行大量压缩操作。2.正在执行mapreduce作业可以通过CDH前台查看整...
分类:其他好文   时间:2014-12-09 13:48:38    阅读次数:11902
Hadoop大象之旅009-通过Shell操作hdfs
本文介绍如何使用shell命令方便的操作hadoop...
分类:系统相关   时间:2014-12-09 10:34:31    阅读次数:349
浅谈Hadoop下HDFS文件系统
Hadoop下HDFS文件系统在这里我们对Hadoop的基本概念,历史功能就不做过多的阐述,重点在对于他的文件系统做一些了解和阐述。HDFS(Hadoopdistributedfilesystem)是一个分布式文件系统。具有高容错性(fault-tolerant),使得他能够部署在低廉的硬件上。他可以提供高吞吐率来访..
分类:其他好文   时间:2014-12-09 02:03:50    阅读次数:269
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!