整体架构 Kubernetes属于主从分布式架构 主要由Master Node和Worker?Node组成，以及包括客户端命令行工具kubectl和其它附加项。 Master Node： 作为控制节点，对集群进行调度管理； Master Node由 API Server、Scheduler、Clus ...
分类：
其他好文 时间：
2019-07-25 23:23:33
阅读次数：
105
PyTorch学习率调整策略通过torch.optim.lr_scheduler接口实现。PyTorch提供的学习率调整策略分为三大类，分别是 a. 有序调整：等间隔调整(Step)，按需调整学习率(MultiStep)，指数衰减调整(Exponential)和 余弦退火CosineAnnealin ...
分类：
其他好文 时间：
2019-07-24 22:48:19
阅读次数：
459
任务调度可以从一个Action类算子开始，因为Action类算子会触发一个job的执行 划分stage,以taskSet形式提交任务，DAGScheduler 类中getMessingParentStages()方法是切割job划分stage ...
分类：
其他好文 时间：
2019-07-24 22:22:40
阅读次数：
111
返回总目录 为什么nova不像cinder一样是工作流的形式??? 描述详细 日志显示初始有两个 host（在我们的实验环境中就是controller和compute），依次经过若干filter 的过滤，两个计算节点都通过了。过滤器补充：DifferentHostFilter：allows the ...
分类：
其他好文 时间：
2019-07-24 16:38:14
阅读次数：
90
stage概念 Spark任务会根据RDD之间的依赖关系，形成一个DAG有向无环图，DAG会提交给DAGScheduler，DAGScheduler会把DAG划分相互依赖的多个stage，划分stage的依据就是RDD之间的宽窄依赖。遇到宽依赖就划分stage,每个stage包含一个或多个task任 ...
分类：
其他好文 时间：
2019-07-21 18:39:02
阅读次数：
88
博文大纲：（一）GlusterFS相关概念。（二）GlusterFS各种卷类型的部署及客户端挂载使用。（三）GlusterFS维护命令。（一）GlusterFS相关概念：GlusterFS是一个开源的分布式文件系统，同时也是Scale-Out存储解决方案Gluster的核心，在存储数据方面有强大的横向扩展能力。GlusterFS主要由存储服务器、客户端及NFS/Samba存储网关（可选组件）组成。
分类：
其他好文 时间：
2019-07-20 23:38:09
阅读次数：
131
1.请求对象的持久化2.去重指纹的永久化所有请求对象、去重指纹均存储在redis中，而不是在内存中，断电/关机即消失，如果第一次请求未完成，第二次需要重新请求全部。3.实现分布式所有的服务器公用一个redis中的request对象流程图：在项目中settings.py中配置：RedisPipelin... ...
分类：
其他好文 时间：
2019-07-20 23:23:58
阅读次数：
125
1、基础架构 1.1 Master Master节点上面主要由四个模块组成：APIServer、scheduler、controller manager、etcd。 APIServer。APIServer负责对外提供RESTful的Kubernetes API服务，它是系统管理指令的统一入口，任何对 ...
分类：
Web程序 时间：
2019-07-19 20:33:35
阅读次数：
115
MySQL Group Replication mgr 单主 proxysql 读写分离配置
分类：
数据库 时间：
2019-07-19 16:58:24
阅读次数：
223
