对于分布式文件系统来说，为了保证数据的高可用性和系统容错能力，往往会把同一数据块在多个节点上进行备份，那么如何分配这些复制数据的位置，不同的文件系统会有不同的策略。一、业界分析在介绍HDFS之前，先简单了解一些其它文件系统的放置策略：1. Lustre——一致性哈希环对于不同的数据备份，需要放到不同...
分类：
其他好文 时间：
2015-03-11 01:56:10
阅读次数：
114
一、问题描述由于namenode 是HDFS的大脑，而这个大脑又是单点，如果大脑出现故障，则整个分布式存储系统就瘫痪了。HA（High Available）机制就是用来解决这样一个问题的。碰到这么个问题，首先本能的想到的就是冗余备份，备份的方式有很多种，前辈们设计的有元数据备份方案，secondar...
分类：
其他好文 时间：
2015-03-11 00:35:32
阅读次数：
211
本篇博客可认为是对 使用java实现http多线程下载 一文的再次解读。
首先,从宏观来说
java实现多线程下载这个功能的实现由以下几部分组成:
1 建立多个线程去分别下载文件的一部分。
2 将多个线程下载的文件(还在内存中),写入硬盘中的一个文件。
3 断点续传
GET /Path/FileName HTTP/1.0
Host: www.server.com:8...
分类：
编程语言 时间：
2015-03-09 22:34:39
阅读次数：
210
一、Bmob简介（1）数据服务
支持丰富的数据类型，灵活方便的增删改查，可视化的数据操作，安全的角色和ACL管理，多表关联处理，数据的批量处理，本地数据缓存，开发者们无需关注服务器后端，就可以实现多平台的同步开发。
（2）文件服务
文件服务允许上传任何的文件类型，支持分片断点续传，此外，针对移动端对图片业务的需求，还提供了生成高压缩比的缩略图服务。
（3）推送服务
提供了Android和i...
分类：
其他好文 时间：
2015-03-07 17:16:02
阅读次数：
259
用AFNetworking实现断点续传，暂停，继续AFNetworking断点续传暂停恢复AFNetworking的版本：platform:ios,'7.0'pod"AFNetworking","~> 2.3.0"简单思路：通过重组progressBlock ， successBlock ，requ...
分类：
Web程序 时间：
2015-03-07 15:30:27
阅读次数：
176
最近研究了一下关于文件下载的相关内容，觉得还是写些东西记下来比较好。起初只是想研究研究，但后来发现写个可重用性比较高的模块还是很有必要的，我想这也是大多数开发人员的习惯吧。对于HTTP协议，向服务器请求某个文件时，只要发送类似如下的请求即可：GET /Path/FileName HTTP/1.0Ho...
分类：
编程语言 时间：
2015-03-07 00:53:02
阅读次数：
254
wget下载整个网站，或者特定目录需要下载某个目录下面的所有文件。命令如下wget-c-r-np-k-L-pwww.xxx.org/pub/path/在下载时。有用到外部域名的图片或连接。如果需要同时下载就要用-H参数。wget-np-nH-r--span-hostswww.xxx.org/pub/path/-c断点续传-r递归下载，下载指定网页某..
分类：
Web程序 时间：
2015-03-05 15:00:13
阅读次数：
196
最近做的一个升级应用，在下载升级包的过程中又有一个toast类型的dialog悬浮在屏幕右上角，这个时候切换系统语言会出现问题。当主屏幕为升级应用时，切换系统语言升级应用重启，而重启后并不能自动断点续传切换前的下载进度；当主屏幕为launcher的时候，切换系统语言进度条上的提示语言并不能跟着切换；...
分类：
移动开发 时间：
2015-03-05 12:22:48
阅读次数：
178
1、axel的介绍：Axel是Linux下一个不错的HTTP/FTP高速下载工具。支持多线程下载、断点续传，且可以从多个地址或者从一个地址的多个连接来下载同一个文件。适合网速不给力时多线程下载提高下载速度。比如在国内VPS或服务器上下载lnmp一键安装包用Axel就比wget快。2、axel的下载..
分类：
其他好文 时间：
2015-03-04 19:27:10
阅读次数：
412
问题作为资源共享平台, 百度云做的还是很出色的, "xxx site:pan.baidu.com"就可以找到很丰富的资源. 然而, 下载百度云上的文件就略蛋疼了. 早在12年的时候, 百度云还是一个良心企业, 不仅免费送容量, 而且下载不限速不限时不用客户端, 看片不会被绿*坝, 在教育网内甚至可以...
分类：
系统相关 时间：
2015-03-04 14:32:08
阅读次数：
240
