一、Storm概述
Storm是一个分布式的、可靠的、零失误的处理流式数据的系统。它的工作就是委派各种组件分别独立的处理一些简单任务。在Storm集群中处理输入流的是Spout组件,而Spout又把读取的数据传递给叫Bolt的组件。Bolt组件会对收到的数据元组进行处理,也有可能传递给下一个Bolt。我们可以把Storm集群想象成一个由bolt组件组成的链条集合,数据在这些链条上传输...
分类:
其他好文 时间:
2014-08-04 10:59:37
阅读次数:
273
格式化namenode后,通过jps可发现datanode没有启动成功,查看datanode上的日志/home/wukong/usr/hadoop-1.2.1/logs/hadoop-wukong-datanode-bd12.log,可以发现是namespaceid不对。 解决办法: 1、查看namenode上...
分类:
其他好文 时间:
2014-08-03 23:37:06
阅读次数:
661
Oracle的管理可以通过OEM或者命令行接口。OracleClusterware的命令集可以分为以下4种:节点层:osnodes网络层:oifcfg集群层:crsctl,ocrcheck,ocrdump,ocrconfig应用层:srvctl,onsctl,crs_stat下面分别来介绍这些命令。...
分类:
数据库 时间:
2014-08-03 23:05:06
阅读次数:
383
1 安装环境 Hadoop1.2.1 分布式集群环境下安装(192.168.1.53-56) Mahout 0.9 2 安装介质 下载地址:http://archive.apache.org/dist/mahout/0.9/ 文件名(二进制):mahout-distribution-0.9...
分类:
其他好文 时间:
2014-08-03 20:33:45
阅读次数:
190
ocr和votedisk是什么?
作为集群节点,oracle cluster会在...
分类:
数据库 时间:
2014-08-03 15:22:35
阅读次数:
378
这是我在实验中碰到的问题,我们在定义php-fpm为资源的时候,用php程序包自带的脚本会报错。笔者花了很多时间尝试了各种办法,最后找到了一位网友写的脚本,可以解决。脚本如下:#!/bin/sh#=================================================================================..
分类:
Web程序 时间:
2014-08-03 08:00:26
阅读次数:
347
最近在学习Linux集群的相关知识,实验中经常会在一大批主机上安装相同软件包、或者添加相应的配置信息,花了一点时间,写了一个shell脚本,虽然很拙劣,但还是可以满足现在的需求了,如果以后有其他需求的话,在考虑修改这个脚本的……控制主机:VS192.168.2.131被控主机1:RS1..
分类:
系统相关 时间:
2014-08-03 07:58:15
阅读次数:
291
一、NDBCluster(分布式存储引擎)存储引擎简单简介NDB存储引擎也叫NDBCluster存储引擎,主要用于MySQLCluster分布式集群环境,Cluster是MySQL从5.0版本才开始提供的新功能。这部分我们可能并不仅仅只是介绍NDB存储引擎,因为离开了MySQLCLuster整个环境,NDB存储引擎也将失去..
分类:
数据库 时间:
2014-08-03 07:55:25
阅读次数:
356
Spark应用开发实践性非常强,很多时候可能都会将时间花费在环境的搭建和运行上,如果有一个比较好的指导将会大大的缩短应用开发流程。
本篇主要讲述如何运行KafkaWordCount,这个需要涉及Kafka集群的搭建,还是说越仔细越好。
分类:
其他好文 时间:
2014-08-02 23:13:04
阅读次数:
267
这个是非集群模式,以后可能还会写集群的情况今天折腾了好久才把这个跑起来,静态资源归Apache加载不用请求Tomcat了,这样以后就方便做集群了,用的是JK的方式,据说还有其他的方式,这个没有详细去研究,今天就先把自己的过程说一遍方便以后查看。首先需要一个mod_jk-1.2.31-httpd-2....
分类:
其他好文 时间:
2014-08-02 18:06:43
阅读次数:
243