简单介绍 1,client storage tracker的关系 先用一幅图来解释用户如何访问一个通过DFS管理的文件 一般来说,一台服务器只有一个storage server,多个storage server可以组成一个group,同一group间storage server的数据自动同步(备份与 ...
分类:
其他好文 时间:
2017-03-23 01:30:01
阅读次数:
249
估计80%以上接触互联网的人都知道bt是什么东西,任何一个用bt下载的人都知道这样一个概念,种子。bt种子就是记录了p2p对等网络中tracker, nodes, files等信息,也就是说,这个种子告诉你,你要下载什么,到哪里下载。bt种子文件有自己的文件格式,下面简单看看bt种子文件的结构。 在 ...
分类:
其他好文 时间:
2017-03-22 17:34:31
阅读次数:
170
公平调度是以pool为单位分配任务slots的,容量调度以queue的方式分配tasktracker的,当都只有一个job的时候,两种调度器都可以利用整个集群的资源,在每个pool内部可以是以FIFO方式调度也可以是公平方式调度,但是在queue内部只能是以FIFO方式调度,这是公平调度和容量调度的 ...
分类:
其他好文 时间:
2017-03-19 21:57:27
阅读次数:
276
我个人一直是比较反感黑科技的,其中首当其冲的就是 插件化 以及 保活。作为一个开发者,除了研究技术,提高自己以外,是否应该考虑些其他东西呢?尤其是我们这些嵌入式系统(客户端)开发者,在依赖、受哺于系统...
分类:
移动开发 时间:
2017-03-16 16:31:19
阅读次数:
314
0.机器准备 准备4台测试笔记本用于做服务器(装上CentOS6.5_x86_64系统)作部署集群。 配置每台机器上的/etc/hosts文件,例如: [root@slave3 ~]$ sudo vi /etc/hosts 192.168.110.1 master 192.168.110.2 sla ...
分类:
其他好文 时间:
2017-03-08 13:55:52
阅读次数:
426
http://blog.cloudera.com/blog/2015/03/exactly-once-spark-streaming-from-apache-kafka/ http://www.jianshu.com/p/b4af851286e5 streaming通过direct接收数据的入口是c... ...
分类:
其他好文 时间:
2017-03-05 13:30:23
阅读次数:
210
今天安装了fastdfs,过程拿出来与大家分享。 首先版本是fastdfs5.05,本人已分享至百度云盘:http://pan.baidu.com/s/1pLCXLDD 以三台服务器为例,跟踪节点为172.16.12.63,存储节点为172.16.12.64,172.16.12.65 所有节点执行1 ...
分类:
其他好文 时间:
2017-02-21 19:12:15
阅读次数:
232
git(1) git(1) Manual Page NAME git - the stupid content tracker git(1) Manual Page NAME git - the stupid content tracker git - the stupid content trac ...
分类:
其他好文 时间:
2017-02-19 23:39:16
阅读次数:
246
基础环境说明6台服务器两台tracker4台storages192.168.56.131tracker服务器edu-dfs-tracker-1192.168.56.132tracker服务器edu-dfs-tracker-2192.168.56.135storage服务器edu-dfs-storage-group1-1192.168.56.136storage服务器edu-dfs-storage-group1-2192.168.56.137storage服..
分类:
其他好文 时间:
2017-01-22 03:52:05
阅读次数:
312
github排名:https://github.com/trending, github搜索:https://github.com/search. 此文章转自github:https://github.com/Tim9Liu9/TimLiu-iOS UI 下拉刷新 EGOTableViewPullR ...
分类:
移动开发 时间:
2017-01-13 20:52:19
阅读次数:
583