配置文件备份使更改后的配置成为新的启动配置copy running-config startup-config 将配置保存到启动配置文件马上更改。使设备恢复为其原始配置在特权执行模式下reload 按Enter键确认 恢复 输入n或者no放弃恢复。---------------------...
分类:
系统相关 时间:
2014-11-26 22:11:49
阅读次数:
249
最近工作需要,看了HDFS读写数据块这部分。不过可能跟网上大部分帖子不一样,主要写了${dfs.data.dir}的选择策略,也就是block的放置策略。我主要是从我们工作需要的角度来读这部分代码的。 创建文件总共有两步: 1、在写block之前,需要与NameNode通信来生成文件(INo...
分类:
其他好文 时间:
2014-11-26 20:33:43
阅读次数:
367
top:top命令监控CPU利用率,进程状态和内存利用率并且可以详细列出每一个进程占用了多少CPU和多少内存。
[map@ctb-test sectionLocus]$ top
top - 10:52:24 up 99 days, 21:31, 6 users, load average: 1.67, 2.01, 1.83
Tasks: 665 total, 2 running,...
分类:
编程语言 时间:
2014-11-26 18:53:23
阅读次数:
340
HDFS联邦HDFSHAHDFS快照回顾:HDFS两层模型Namespace:包括目录,文件和块.它支持所有命名空间相关的文件操作,如创建,删除,修改,查看所有文件和目录BlockStorageService(块存储服务)包括两部分1.在namenode中的块的管理提供datanode集群的注册,心跳检测等功能.处理块的报告信息和..
分类:
其他好文 时间:
2014-11-26 06:48:59
阅读次数:
140
配置HDFS联邦配置etc/hadoop/hdfs-site.xml<configuration>
<property>
<name>dfs.nameservices</name>
<value>ns1,ns2</value>
</property>
<property>
<name>dfs.namenode.rpc-address.ns1</name>
<value&g..
分类:
其他好文 时间:
2014-11-26 06:48:49
阅读次数:
155
前言: 朋友说简单的查询导致Transaction timed out: deadline问题,怀疑是数据库表锁了,1,应用故障描述Deadline问题: --- The error occurred in META-INF/ibatis/ITEM_sqlmap.xml. --- The error occurred while executing query. --- Check th...
分类:
数据库 时间:
2014-11-26 01:29:20
阅读次数:
538
HDFSFederation是为解决HDFS单点故障而提出的NameNode水平扩展方案,该方案允许HDFS创建多个Namespace以提高集群的扩展性和隔离性。在Federation中新增了block-pool的概念,block-pool就是属于单个Namespace的一组block,每个DataNode为所有的block-pool存储block,可以理解bloc..
分类:
其他好文 时间:
2014-11-25 19:03:31
阅读次数:
253
Hadoop
Yarn的安装部署于Hadoop类似,以下以CDH4.5为例说明安装步骤。
三台机器,修改/etc/hosts及/etc/sysconfig/network中的HOSTNAME:
172.20.4.142 yarn-namenode
172.20.4.143 yarn-datanode1
172.20.4.147 yarn-d...
分类:
其他好文 时间:
2014-11-24 20:57:36
阅读次数:
298
1.下载storm并解压
2.修改文件 storm.yaml
我这里填的是域名,填ip也可以
hadoop@namenode:~/storm-0.9.2/conf$ vim storm.yaml
# Licensed to the Apache Software Foundation (ASF) under one
# or more contributor licens...
分类:
其他好文 时间:
2014-11-24 01:03:47
阅读次数:
334
(写于 2014年 11月 23日) 从昨晚打BestCoder到今天的Running IT Youth(定向越野编程比赛),各种卡题痛苦挣扎过后,现在来稍微小结一下: 目前找到的卡题原因大概有如下几点:1: 就是个可恶的输入输出问题,先说long long的,定义一般直接用long lon...
分类:
其他好文 时间:
2014-11-23 17:21:38
阅读次数:
196