Hadoop是什么?hadoop是一个存储系统+计算框架的!主要解决海量数据存储与计算的问题。Hortonworks首席技术官Eric Baldeschwieler在2012年的Hadoop和大数据峰会上提到过:2015年,全球一半数据中都将通过Hadoop来处理。我们已经看到越来越多的数据都在往H...
分类:
其他好文 时间:
2016-01-26 18:20:47
阅读次数:
257
随着磁盘技术的发展,单磁盘容量快速增加,从最初的几十兆到现如今的4TB盘的广泛使用,但性能的提升却远没有那么显著,出现了磁盘容量与性能增长的不匹配。RAID3.0技术为海量数据存储而设计,完美的实现了海量数据存储下的高可靠、可共享、节点间冗余能力,以及足够高的性价比..
分类:
其他好文 时间:
2015-12-30 15:31:47
阅读次数:
181
Redis与Memcached的区别传统MySQL+ Memcached架构遇到的问题 实际MySQL是适合进行海量数据存储的,通过Memcached将热点数据加载到cache,加速访问,很多公司都曾经使用过这样的架构,但随着业务数据量的不断增加,和访问量的持续增长,我们遇到了很多问题: 1.M.....
分类:
系统相关 时间:
2015-11-28 12:06:57
阅读次数:
275
一、简介:在过去的几年中,NoSQL数据库一度成为高并发、海量数据存储解决方案的代名词,与之相应的产品也呈现出雨后春笋般的生机。然而在众多产品中能够脱颖而出的却屈指可数,如Redis、MongoDB、BerkeleyDB和CouchDB等。由于每种产品所拥有的特征不同,因此它们的应用场景也..
分类:
数据库 时间:
2015-11-27 15:11:13
阅读次数:
213
Redis与Memcached的区别传统MySQL+ Memcached架构遇到的问题 实际MySQL是适合进行海量数据存储的,通过Memcached将热点数据加载到cache,加速访问,很多公司都曾经使用过这样的架构,但随着业务数据量的不断增加,和访问量的持续增长,我们遇到了很多问题: 1.M.....
分类:
系统相关 时间:
2015-11-04 14:42:58
阅读次数:
320
传统MySQL+ Memcached架构遇到的问题 实际MySQL是适合进行海量数据存储的,通过Memcached将热点数据加载到cache,加速访问,很多公司都曾经使用过这样的架构,但随着业务数据量的不断增加,和访问量的持续增长,我们遇到了很多问题: 1.MySQL需要不断进行拆库拆表,Mem.....
分类:
数据库 时间:
2015-09-17 13:17:06
阅读次数:
190
运维中关键技术点解剖:1 大量高并发网站的设计方案 ;2 高可靠、高可伸缩性网络架构设计;3 网站安全问题,如何避免被黑?4 南北互联问题,动态CDN解决方案;5 海量数据存储架构 一、什么是大型网站运维?首先明确一下,全文所讲的”运维“是指:大型网站运维,与其它运维的区别还是蛮大的;然后我们再对....
分类:
其他好文 时间:
2015-09-15 17:52:10
阅读次数:
181
运维中关键技术点解剖:1 大量高并发网站的设计方案 ;2 高可靠、高可伸缩性网络架构设计;3 网站安全问题,如何避免被黑?4 南北互联问题,动态CDN解决方案;5 海量数据存储架构一、什么是大型网站运维?首先明确一下,全文所讲的”运维“是指:大型网站运维,与其它运维的区别还是蛮大的;然后我们再对大型...
分类:
系统相关 时间:
2015-09-09 06:12:43
阅读次数:
261
原文:http://weibo.com/p/1001643874615465508614 微博平台研发作为微博的底层数据及业务支撑部门,已经经历了5年的发展历程。伴随着从数据及业务暴发式增长,我们在海量数据存储方面遭遇了诸多挑战,与此同时也伴随着丰富经验的积累。 本次新兵训练营,受众在于应届毕业生,...
分类:
其他好文 时间:
2015-08-14 15:06:17
阅读次数:
126
原文:http://weibo.com/p/1001643874615465508614微博平台研发作为微博的底层数据及业务支撑部门,已经经历了5年的发展历程。伴随着从数据及业务暴发式增长,我们在海量数据存储方面遭遇了诸多挑战,与此同时也伴随着丰富经验的积累。 本次新兵训练营,受众在于应届毕业生,目...
分类:
其他好文 时间:
2015-08-14 08:44:15
阅读次数:
200