前期对分片分段概念有点不清晰,看到一篇好文,mark本文转自:http://blog.csdn.net/keyouan2008/archive/2010/08/27/5843388.aspx1,MTU(Maximum Transmission Unit,MTU),最大传输单元(1)以太网和802.3...
分类:
其他好文 时间:
2015-03-01 13:07:32
阅读次数:
169
这是我第一次申请使用云主机,感觉已经落后了一个时代。因为可以试用半年,看起来比Azure的一元钱用一个月和腾讯的15天免费便宜不少,所以图便宜申请了阿里云ECS。Elastic的意思我想大概是强调伸缩性吧,资源紧张的时候直接花钱多买些,回头再研究具体要如何优化。首先注册有些小麻..
分类:
其他好文 时间:
2015-02-26 00:10:29
阅读次数:
199
本文主要介绍在一台win7电脑上模拟mongo分片。如果有多台服务器,可以将每个mongo部署在单台电脑上。我们将配置3个mongo分片,3个配置服务器,1个路由服务器。如下图所示进行配置,介绍如何增加分片、移除分片。 一.下载windows zip版本,解压到一个目录中,并且复制7份,命名如...
分类:
数据库 时间:
2015-02-25 22:17:14
阅读次数:
188
大数据量、高并发数据库的高性能、高可用性解决方案:1.拆表:大表拆小表(垂直拆,水平拆;分表,分区partition,分片sharding),可以在应用层实现,也可以在数据库层面实现一部分;提高系统性能。2.分库:把表放到不同的数据库,这也是分布式数据库的基础;提高系统性能。3...
分类:
数据库 时间:
2015-02-24 13:57:20
阅读次数:
190
在旧版本的samples中,使用的是旧的api,mapred下面的MultiFileInputFormat,现在已经过时。现在推荐使用mapreduce下面的CombineInputFormat来处理。应用场景: 如果文件数量大,而且单个文件又比较小,若是使用FileInputFormat进行分片....
分类:
其他好文 时间:
2015-02-23 09:36:52
阅读次数:
190
我们知道fabric中间件可以实现HA故障自动切换、水平分片、读写负载等功能。无需额外安装代理,使用方便。那fabric本身是否会存在性能瓶颈点呢?因此,接下来我们就对fabric中间件进行压力测试。思路:fabric中间件主要起路由功能,客户端连接池一旦初始化之后,和fabric的关系已..
分类:
数据库 时间:
2015-02-15 13:44:18
阅读次数:
459
Mongodb Sharding
介绍 Sharding in MongoDB
分片组建:
Shards(建议用Replica)、Query Routers、Config Servers。
Shards store the data. To provide high availability and dataconsistency, in...
分类:
数据库 时间:
2015-02-15 13:35:41
阅读次数:
298
mt_vqmon异常数据分析1.首缓冲时间值异常(1)分析:当第一个m3u8请求时,已经记录request时间,1423716972224, 正常情况会立即请求分片列表。上述图表明请求了一个m3u8之后 很长一段时间继续请求m3u8,此时请求url相同,判断为同一个节目,当第一个分片计算出pts时,...
分类:
其他好文 时间:
2015-02-12 19:51:11
阅读次数:
137
通过分片能够增加更多的机器来应对不断增加的负载和数据,还不影响应用。分片(sharding)是指将数据拆分,将其分散到不同的机器上,不需要功能强大的大型计算机就可以存储更多的数据,处理更大的负载。MongoDB支持自动分片,可以摆脱手动分片的管理困扰,集群自动切分数据,做..
分类:
数据库 时间:
2015-02-12 16:26:58
阅读次数:
2514
IP分片和TCP分片的区别tcp网络工作前段时间要做一个关于网络嗅探的程序,里面要重组IP分片,TCP分片.但做的时候忽视了一个很重要的东西:IP分片与TCP分片弄混淆了.首先声明:TCP分片应该称为TCP分段.————————————————————————————————————————————...
分类:
其他好文 时间:
2015-02-11 12:32:44
阅读次数:
427