Apache MINA是一个网络应用程序框架,用来帮助用户简单地开发高性能和高可靠性的网络应用程序。它提供了一个通过Java NIO在不同的传输例如TCP/IP和UDP/IP上抽象的事件驱动的异步API。 Apache MINA 也称为: ● NIO 框架库 ● 客户端服务器框架库 ● 一个...
分类:
移动开发 时间:
2014-09-25 21:01:27
阅读次数:
326
参考《CentOS6.4下Storm0.9.2单机版安装》的步骤在ubuntu上安装storm,中间遇到一些问题记录一下。参考文章链接:http://blog.csdn.net/qiyating0808/article/details/36041299我的linux环境:ubuntu-10.04.4-desktop-i386一,安装zeromq、jzmq及zookeeper时比较顺利,略过。ze..
分类:
其他好文 时间:
2014-09-25 13:37:19
阅读次数:
274
1、高可靠性系统一个至关重要的方面是消除单点故障SPOF。SPOF是指能够导致系统宕机或者数据丢失的单个设备或者软件的故障。为了消除单点故障,需要检查以下几个结构的冗余性: 网络模块,比如交换机和路由器 应用...
分类:
其他好文 时间:
2014-09-25 03:59:18
阅读次数:
772
supervisor是storm集群重要组成部分,supervisor主要负责管理各个"工作节点"。supervisor与zookeeper进行通信,通过zookeeper的"watch机制"可以感知到是否有新的任务需要认领或哪些任务被重新分配。我们可以通用执行bin/storm superviso...
分类:
其他好文 时间:
2014-09-24 23:03:27
阅读次数:
383
Next,packagethesourceintoajar,whichissentwhenyouruntheStormClientcommandtosubmitthetopology.BecauseyouusedMaven,theonlythingyouneedtodoisgotothesourcefolderandrunthefollowing:mvnpackageOnceyouhavethegeneratedjar,usethestormjarcommandtosubmitthetopology(yous..
分类:
其他好文 时间:
2014-09-24 18:31:28
阅读次数:
191
今天有个storm的topology被人kill掉了,但是找不到是谁做的,storm的ui有killtopology的功能,但是没有权限验证,这样就导致知道ui地址的任何人都可以kill掉topology,比较危险,考虑把这个actiondisable掉。有两种方法:1.前端增加nginx,做location分析ui页面,对应kill的but..
分类:
其他好文 时间:
2014-09-24 04:41:26
阅读次数:
212
package storm.starter;import backtype.storm.Config;import backtype.storm.LocalCluster;import backtype.storm.LocalDRPC;import backtype.storm.StormSubmi...
分类:
其他好文 时间:
2014-09-23 21:33:45
阅读次数:
245
最近在使用storm做了一下数据处理性能测试。 ? ? Topology结构:spout输出80万数据(csv格式);bolt1解析csv,拆分各信息段;bolt2按bolt1中某个字段汇总,累加记数后入库(入库触发频率:60s)。 ? ?...
分类:
其他好文 时间:
2014-09-23 17:43:35
阅读次数:
179
备份策略 备份思想一、系统潜在的威胁 Ø 系统硬件故障 Ø 软件故障 Ø 电源故障 Ø 用户的误操作 Ø 人为破坏 Ø 缓存中的内容没有及时的写入磁盘 Ø 自然灾害 二、备份介质的选择 备份介质:硬盘[比较常见的是通过Linux文件服务器] 磁带[常用] 可移动存储设备 一般在选择备份介质时,要从可靠性、速度和价格之间进行权衡,一般选择:硬盘,磁带机 三、备份策略Ø 完全备份 每...
分类:
其他好文 时间:
2014-09-23 16:12:45
阅读次数:
188
云数据库:架构在云端数据库集群上,通过云服务的方式让关系型数据库的可靠性更高,免去繁琐的维护工作,节约硬件成本,其具备以下特点:云数据库特点:1:管理方便:可以自动备份、弹性扩展。2:性能出色:针对数据库高性能需求,采用高端高性能硬件配置,同时对数据库性能参数做了特定的优化。3:配置简单:轻轻松松1...
分类:
数据库 时间:
2014-09-23 16:05:34
阅读次数:
238