大家对CDN并不陌生，工作中或多或少都有所接触，最近也有人问到，在此对CDN相关概念和流程做下总结，希望还能对其他朋友也有所帮助。 一、什么是CDN 维基百科上是这样定义的： CDN：内容分发网络（Content delivery network或Content distribution netwo ...
分类：
其他好文 时间：
2017-03-28 00:04:13
阅读次数：
218
上周公司其他小组在讨论做分布式爬虫，我也思考了一下，提了一个方案，就是使用akka分布式rpc框架来做，自己写master和worker程序，client向master提交begin任务或者其它爬虫需...
分类：
其他好文 时间：
2017-03-26 22:17:33
阅读次数：
363
由于基因组数据过大，想进一步用R语言处理担心系统内存不够，因此想着将文件按染色体拆分，发现python，awk，R 语言都能够非常简单快捷的实现，那么速度是否有差距呢，因此在跑几个50G的大文件之前，先用了244MB的数据对各个脚本进行测试，并且将其速度进行对比。 首先是awk处理，awk进行的是逐 ...
分类：
编程语言 时间：
2017-03-26 11:15:18
阅读次数：
237
注意: 配置前需要将上一篇的配置都清除掉 nginx作为请求分发服务器时, 有健康检查机制, 挂了的服务器不会在分发请求 但lvs没有, 需要keepalived进行健康检查, 否则仍然将请求分发过去, 造成无法访问 安装keepalived高可用的lvs集群 1, 安装 ipvsadm 上篇讲过, ...
分类：
其他好文 时间：
2017-03-26 00:06:46
阅读次数：
351
最近学完了web部分，发现有些地方总是单个容易理解，可是把所有的放在一起来大杂烩，总是有那么几个知识点容易混淆。其实网上的资料已经够多了，虽然也不乏辛劳的搬运工。可是最终的目的不就是要我们自身理解吗？自己理解了的东西才正真是我们的。作为额外的奖励，我们先来关注一下JSP的九大隐式对象。可以看看下图中 ...
分类：
编程语言 时间：
2017-03-25 15:37:55
阅读次数：
166
背景：尽管yum和service模块安装和管理相应服务很方便，但实际生产中，一般需要使用源码安装思路：先在一台机器上编译安装好nginx，打包，再用ansible分发下去1.创建相关目录和配置文件，整体树状图mkdir/etc/ansible/nginx_install1.1vim/etc/ansible/nginx_install/install.y..
分类：
其他好文 时间：
2017-03-24 21:04:28
阅读次数：
748
作者：林毅文链接：https://www.zhihu.com/question/19851109/answer/22214517来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 1、基础java学习。数据库，HTTP神马的。请求分发拦截器还是android还是quart ...
分类：
编程语言 时间：
2017-03-24 20:00:14
阅读次数：
250
DHT 类似Tracker的根据种子特征码返回种子信息的网络.DHT全称叫分布式哈希表(Distributed Hash Table)，是一种分布式存储方法。在不需要服务器的情况下，每个客户端负责一个小范围的路由，并负责存储一小部分数据，从而实现整个DHT网络的寻址和存储。新版BitComet允许同 ...
分类：
其他好文 时间：
2017-03-23 23:45:23
阅读次数：
271
