memcached对容错不做处理的，也就是说当 Memcached服务端挂掉或者Memcached重启复活，由于Memcached重启后无数据，对高并发的大型系统中，是没办法接受的，我们在集群的情况下，要做到负载均衡和容错，这种情况下，服务器端挂掉，负载就不那么均衡，缓存数据也会丢失，重新对数据库进行操作，加大的系统的性能，数据丢失容错也没做得那么好。...
分类：
系统相关 时间：
2014-11-26 16:44:12
阅读次数：
428
Erlang error handlingContentsPrefacetry-catchProcess linkErlang-way error handlingOTP supervisor treeRestart process0. Preface说到容错处理，大概大家都会想到 try-catc...
分类：
其他好文 时间：
2014-11-25 15:46:19
阅读次数：
172
在 Linux上安装Magent代理服务器软件时，在后面的文章会介绍介绍了Magent解决Memcached服务的负载均衡和容错上。我这边先介绍安装Magent过程中出现的问题...
分类：
其他好文 时间：
2014-11-25 12:52:14
阅读次数：
246
在实际的项目中，需要storm从metaq中读取数据，一开始就有日志问题，查到是storm/lib中的log4j-over-slf4j和slf4j-api.jar包的不兼容导致的，这些日志包使用时必须版本一致，只有又产生了java.lang.IncompatibleClassChangeError:...
分类：
Web程序 时间：
2014-11-24 18:52:08
阅读次数：
360
1、Google File System概述google file system是一个分布式文件系统，针对的是数据密集型应用，提供容错功能，运行在低廉的服务器上，同时给大量的用户提供高性能服务。尽管google file system有着传统的分布式文件系统的目标，但是GFS的开发兼顾观察现在Int...
分类：
其他好文 时间：
2014-11-24 11:49:59
阅读次数：
156
RDD（Resilient Distributed Datasets）弹性分布式数据集，是在集群应用中分享数据的一种高效，通用，容错的抽象，是Spark提供的最重要的抽象的概念，它是一种有容错机制的特殊集合，可以分布在集群的节点上，以函数式编操作集合的方式，进行各种并行操作。
RDD是只读的，不可变的数据集。RDD也是容错的，假如其中一个RDD坏掉，RDD中有记录之前的依赖关系，依赖关系中记录算...
分类：
其他好文 时间：
2014-11-23 21:44:22
阅读次数：
292
[转]RAID常用级别的比较特点硬盘及容量性能及安全典型应用raid 0用于平行存储，即条带。其原理是把连续的数据分成几份，然后分散存储到阵列中的各个硬盘上。任何一个磁盘故障，都将导致数据丢失。硬盘数：一个或更多容量：总的磁盘容量性能：读写性能高，随机写性能高安全：无冗余，无热备盘，无容错性，安全性...
分类：
其他好文 时间：
2014-11-23 17:29:53
阅读次数：
246
1.1 产品概述
VDataHub基于Apache Sqoop，最初定位是用于将关系数据库中的数据导入Hadoop/Hive/HBase。Sqoop基于Hadoop的MapReduce来完成数据导入导出工作，提供了很好的容错性。刚开始项目组也仅仅直接采用社区版本来完成数据导入导出。但在使用过程中，我们发现有很多地方是Sqoop现有版本没法支持的，如果不解决，是不能用于现有数据平台建设中的。
基...
分类：
其他好文 时间：
2014-11-21 18:50:54
阅读次数：
317
3 分布式系统3.5 容错故障检测：心跳协议；当机器发生故障时，需要将上面的服务迁移到其他服务器上，为了保证强一致性，需要确保故障机器不再提供服务；主要问题：正常机器和故障机器之间需要对“故障机器是否应该被认为发生故障而停止服务”达成一致。异步网络中多态机器无法达成一致。租约：带有超时时间的一种授权...
分类：
其他好文 时间：
2014-11-19 10:44:56
阅读次数：
180
续上篇文章，网页抓取到手之后就是解析网页了。在Python中解析网页的库不少，我最开始使用的是BeautifulSoup，貌似这个也是Python中最知名的HTML解析库。它主要的特点就是容错性很好，能很好地处理实际生活中各种乱七八糟的网页，而且它的API也相当灵活而且丰富。但是我在自己的正文提取项...
分类：
编程语言 时间：
2014-11-15 17:00:12
阅读次数：
277
