应用需求:
由于网盘服务端既需要承载用户文件目录的监控又要负责文件的上传和下载,当某一时刻用户访问量较大或用户操作较为频繁是,单台文件监控服务器和文件传输服务器往往无法满足需求,极端情况下很可能造成服务器内存和CPU使用率爆表的情况,而且当Client与文件监控服务器间网络状况不好的情况下,很有可能造成用户操作序列的丢失,即用户在客户端的操作序列没有及时反映到服务端,造成用户本地...
分类:
其他好文 时间:
2014-06-20 13:42:20
阅读次数:
256
摘要:Hadoop之HDFS文件操作常有两种方式,命令行方式和JavaAPI方式。本文介绍如何利用这两种方式对HDFS文件进行操作。...
分类:
其他好文 时间:
2014-06-20 13:33:46
阅读次数:
151
下午
开启ssh服务:service sshd status
rsa:金融界的加密算法
exit
第一次exit是从ssh退出,第二次是退出终端
ssh hadoop0:使用ssh连接主机名为hadoop0(换成ip地址也行) 的机器
使用ssh和服务器(Linux)进行连接:ssh是加密的连接,相当于过了一圈,又回到了原点,但是是加密了的。
secure shell==s...
分类:
其他好文 时间:
2014-06-20 12:51:48
阅读次数:
253
摘要:Hadoop之MapReduce程序包括三个部分:Mapper,Reducer和作业执行。本文介绍和分析MapReduce程序三部分结构。...
分类:
其他好文 时间:
2014-06-20 12:32:07
阅读次数:
197
关于hadoop1.X的安装,其实和0.x的基本没有多大的差别。...
分类:
其他好文 时间:
2014-06-07 14:57:07
阅读次数:
195
摘要:MapReduce程序开发流程遵循算法思路、Mapper、Reducer、作业执行的步骤。...
分类:
其他好文 时间:
2014-06-07 13:42:08
阅读次数:
242
问题描述:开发组反馈有张表中的四个字段数据经常被置为空,走查了很多代码,都没有定位到问题。
系统环境描述:典型的j2ee架构,中间件是weblogic,数据库是oracle。
诊断思路:就是要定位到在某个时刻某个功能触发的。
定位过程:
1.在表上加上一个触发器,建一张监控表,监控update的时候的一些信息,哪个用户操作的,操作的时间点,操作前的值...
分类:
其他好文 时间:
2014-06-07 13:38:15
阅读次数:
152
这篇文章几乎是对Push SSH public keys to multiple
host的翻译,谢谢该作者。使用SSH登陆、执行命令到远程机器需要输入密码,很多系统需要免输密码访问远程机器,比如hadoop主节点访问子节点时,这时可以使用ssh-copy-id命令将公钥拷贝到远程机器上,比如:
s...
分类:
其他好文 时间:
2014-06-07 10:42:57
阅读次数:
208
问题:在Struts2中失效了,不但调转不过去还报404错误。不知道是Struts2中不支持还是需要其他的配置。原因:因为struts2采用过滤器的方式处理请求,默认情况时监控url地址的变化解决办法1、配置web.xml
解决1 2 struts2 3 /* 4 R...
分类:
Web程序 时间:
2014-06-07 09:40:32
阅读次数:
284
Open vSwitch 概述 Open vSwitch(下面简称为 OVS)是由 Nicira
Networks 主导的,运行在虚拟化平台(例如 KVM,Xen)上的虚拟交换机。在虚拟化平台上,OVS 可以为动态变化的端点提供 2
层交换功能,很好的控制虚拟网络中的访问策略、网络隔离、流量监控等等...
分类:
其他好文 时间:
2014-06-07 08:50:08
阅读次数:
282