Hadoop Streaming 是一个工具, 代替编写Java的实现类,而利用可执行程序来完成map-reduce过程
工作流程 :
InputFile --> mappers --> [Partitioner] --> reducers -->
outputFiles
理解 :
1 输入文件,可以是指定远程文件系统内的文件夹下的 *
2 通过集群自己分解到各个PC...
分类:
编程语言 时间:
2014-05-11 14:46:35
阅读次数:
519
mysql集群架构方式很多,根据不同的需求做不一样的架构,简单一点的就是mysql的replication,也就是Mysql的复制功能,模式有:master-slaves,master-slaves-slaves,master-master-slaves等可以有多个分层,那么现在我所要说的是mast...
分类:
数据库 时间:
2014-05-10 23:30:36
阅读次数:
553
----本文大纲分布式文件系统MogileFS环境安装及配置代理测试-------------一、分布式文件系统分布式文件系统(DistributedFileSystem)是指文件系统管理的物理存储资源不一定直接连接在本地节点上,而是通过计算机网络与节点相连,也就是集群文件系统,可以支持大数量的节点以..
分类:
其他好文 时间:
2014-05-10 09:05:12
阅读次数:
568
本Hadoop与HBase集群有1台NameNode, 7台DataNode
1. /etc/hostname文件
NameNode:
node1
DataNode 1:
node2
DataNode 2:
node3
.......
DataNode 7:
node8
2. /etc/hosts文件
N...
分类:
其他好文 时间:
2014-05-10 04:55:08
阅读次数:
386
AIX5.3下Oracle10gRAC启动故障--CRS启动失败系统环境:操作系统:AIX5300-09集群软件:CRS10.2.0.1数据库:Oracle10.2.0.1系统架构图故障现象:系统重启后,在节点上CRS启动失败或CRS服务启动成功,CRSResource无法ONLINE。[root@aix213racg]cat/etc/hosts127.0.0.1loopbackloc..
分类:
数据库 时间:
2014-05-10 03:57:53
阅读次数:
1163
1、环境描述
一台10.0.0.201SQL节点、管理节点
一台10.0.0.202做一个数据节点
一台10.0.0.203做一个数据节点
2、安装Mysql_custter
在MGM管理节点、SQL节点、NDB节点执行同一操作
#:groupaddmysql
#:useraddmysql-gmysql-s/sbin/nologin
#:tar–xvfmysql-cluster-gpl-7.1.15-l..
分类:
数据库 时间:
2014-05-10 03:57:21
阅读次数:
473
服务器端数据访问
服务器端数据访问
服务器端数据介绍
连接、命令和数据集
访问基于 SQL 的数据
将 SQL 数据绑定到 DataGrid
执行参数化选择
在 SQL 数据库中插入数据
更新 SQL 数据库中的数据
删除 SQL 数据库中的数据
将 SQL 数据库中的数据排序
处理主-从关系
编写和使用存储过程
访问基于 XML 的数据
本节小结
服务器端数据介...
分类:
其他好文 时间:
2014-05-09 22:48:56
阅读次数:
273
题解
又是一个浮点数的二分题。题意是这样的,给n个木头棒子,然后他们的长度是l_i,分成k个等分,不允许边角料的拼接。求分成k等分之后的每份长度。
关键还是精度的问题。怎么说呢,因为浮点数的二分毕竟是与整数有区别的。这个区别又特别的恶心,就是搞不出来到底精度差在哪里,那后就不断的尴尬。。。
有一个解决这类浮点数二分的技巧,就是转化成整数的二分,同时新增一个res用于维护当前最大(小)限能够满足的题目要求的值。然后就是不断地更新左边界右边界,同时维护res就行了,当然最后返回res,确保精度。
这个题我放两份...
分类:
其他好文 时间:
2014-05-09 22:05:40
阅读次数:
432
AIX5.3InstallOracle10gRAC错误集锦--9iRACPresent系统环境:操作系统:AIX5300-08集群软件:CRS10.2.0.1数据库:Oracle10.2.0.1系统架构图故障现象:解决方法:[root@aix215tmp]#cat/etc/oratab#ThisfileisusedbyORACLEutilities.Itiscreatedbyroot.sh#andupdatedbytheDatabas..
分类:
数据库 时间:
2014-05-09 21:46:15
阅读次数:
596
一、自述Nginx模块功能也是相当的丰富,但对于ApacheWeb来说,两者之间还是有区别的,大家都知道Nginx模块是直接被编译进了nginx.conf配置文件,而Apache则是被编译成为.SO文件,有些是需要在httpd.conf配置文件中指定是否加载,这样才能激活模块功能。Nginx模块有三个角色,Ha..
分类:
其他好文 时间:
2014-05-09 21:31:42
阅读次数:
413