双网卡绑定主要是为了实现设备容错,负载均衡。1,检查网络配置信息,如下:2,编辑eth0网卡:3,编辑eth1网卡:4,创建一个新配置文件ifcfg-bond0:5,编辑modprobe.conf文件,添加配置信息:mode模式:0=负载均衡模式需要switch配置trunk支持才能发挥实际效果1=同一时间只有..
分类:
其他好文 时间:
2015-01-22 15:51:26
阅读次数:
208
简单题,却犯了两个错误导致WA了多次。第一是程序容错性不好,没有考虑到输入数据中可能给实际已经罚下场的人再来牌,这种情况在system测试数据里是有的。。。二是chronologically这个词没注意,其实如果输入是按时间顺序的,就直接在线处理就行了,用不着int team1[110][110],...
分类:
其他好文 时间:
2015-01-21 21:54:08
阅读次数:
164
1、Hadoop生态系统 2、HDFS(Hadoop分布式文件系统) 源自于Google的GFS论文,发表于2003年10月,HDFS是GFS克隆版。 是Hadoop体系中数据存储管理的基础。它是一个高度容错的系统,能检测和应对硬件故障,用于在低成本的通用硬件上运行。HDFS简化了文件的一致性模型,...
分类:
其他好文 时间:
2015-01-21 14:49:42
阅读次数:
10752
DVSC: Distribute Virtual Swithc Controller(分布式虚拟交换机控制器)。DVSC是一种逻辑的集中式的虚拟交换机,它能让你控制来自于不同XenServer Host上的一块逻辑的网络交换机。DVS的主要功能:网络的可移植性网络的容错能力提高网络的安全性网络环境的...
分类:
其他好文 时间:
2015-01-20 17:51:19
阅读次数:
173
二维码的对于现在已经很流行了,主要是因为其大数据量和容错能力。出于爱好,学了下google的zxing对二维码的处理。首先生成一张二维码的话,只要输入文本就OK了。下面是加密的代码123456789101112131415161718192021222324252627282930313233343...
分类:
微信 时间:
2015-01-19 10:42:07
阅读次数:
475
目录(?)[-]一设计理念空间换时间 多级缓存静态化 索引并行与分布式计算 任务切分分而治之MR 多进程多线程并行执行MPP多维度的可用 负载均衡容灾备份 读写分离 依赖关系 监控伸缩 拆分 无状态优化资源利用 系统容量有限 原子操作与并发控制 基于逻辑的不同采取不一样的策略 容错隔离 资源释放二静...
分类:
其他好文 时间:
2015-01-15 10:53:45
阅读次数:
254
HDFS作为Hadoop的核心技术之一,HDFS(Hadoop Distributed File System, Hadoop分布式文件系统)是分布式计算中数据存储管理的基础。具有高容错高可靠性、高可扩展性、高可获得性、高吞吐率等特性。为超大数据集的应用提供了便利。一、设计的前提和目的HDFS是Go...
分类:
其他好文 时间:
2015-01-12 22:29:31
阅读次数:
264
背景
之前所讨论的SVM都是非常严格的hard版本,必须要求每个点都被正确的区分开。但是,实际情况时很少出现这种情况的,因为噪声数据时无法避免的。所以,需要在hard SVM上添加容错机制,使得可以容忍少量噪声数据。 "软"化问题
软化SVM的思路有点类似正规化,在目标函数添加错误累加项,然后加一个...
分类:
其他好文 时间:
2015-01-11 17:31:22
阅读次数:
228
FailoverSinkProcessor顾名思义是flume中sink输出容错的处理器
继承自AbstractSinkProcessor
先看下整体源码
/**
* Licensed to the Apache Software Foundation (ASF) under one
* or more contributor license agreements. See the N...
分类:
Web程序 时间:
2015-01-08 11:24:31
阅读次数:
234
关于failover网上也有很多例子,但是看到的有多重做法,个人觉得,本着职责单一的原则
1、一台机子运行一个flume agent
2、一个agent 的下游sink指向一个flume agent,不要一个flume agent配置多个端口【影响性能】
下面看具体实例:
首先是flumet agent client的配置
priority越高,优先级越高,会优先使用该sink...
分类:
Web程序 时间:
2015-01-07 16:53:24
阅读次数:
220