本文主要研究了分布式强化学习，利用价值分布(value distribution)的思想，求出回报$Z$的概率分布，从而取代期望值(即$Q$值)。 Q-Learning Q-Learning的目标是近似Q函数，即在策略$\pi$下回报$Z_t$的期望值： \(Q^{\pi}(s,a)=\mathbb ...
分类：
其他好文 时间：
2020-11-06 01:12:19
阅读次数：
18
阿里巴巴在微服务系统下架构可视化方面的探索导读：采用微服务架构后，了解服务之间的关系及依赖是一个比较有挑战的问题。微服务改造后的实际架构模型可能与预想的架构已经存在很大的差异，架构师或系统运维人员需要精确地了解资源实例的构成和交互情况。阿里巴巴在管理微服务方面具有丰富经验，本文总结了阿里巴巴工程师在微服务可视化方面探索。作者简介：严明明(花名：心远)，阿里巴巴集团安全生产高可用架构组高级开发工程师
分类：
其他好文 时间：
2020-11-06 01:01:49
阅读次数：
13
快速排序 快速排序的基本思想 利用分治的思想 快速排序的基本思路 将数组分成两个部分，一个部分大于某个数，一个部分小于某个数，然后递归，直到所有的数字都排序完成 边界判断l >= r时return 设定一个x值，这个x值可以是左边界l，右边界r，或者是(l + r)/2，甚至是随机的值（不能超过边界 ...
分类：
编程语言 时间：
2020-11-04 19:17:58
阅读次数：
28
你真的了解性能压测中的SLA吗？作者简介：襄玲(花名)，阿里巴巴技术专家，PTS研发，近期主导整理和推动云时代性能压测的思想和标准,云计算性能测试国标项目组成员，内部稳定性保障系统之预热系统负责人。本文是《PerformanceTestTogether》（简称PTT）系列专题分享的第6期，该专题将从性能压测的设计、实现、执行、监控、问题定位和分析、应用场景等多个纬度对性能压测的全过程进行拆解，以帮
分类：
其他好文 时间：
2020-11-04 18:08:28
阅读次数：
16
本篇随笔主要介绍C++的随机数生成函数； 随机数生成函数的思想： C++的随机数生成函数的结果其实不是随机数，虽然它的名字是“随机数”，但它的实际的更准确的含义应该是“看似随机但实则可预测的数”； 一个随机数实际上是一条数列的其中一项，随机数数列不是常见的等差或等比数列； 一个简单的随机数数列的递归 ...
分类：
编程语言 时间：
2020-11-02 10:47:57
阅读次数：
32
Kubernetes K8s架构师实战集训营，对标大厂高级K8s运维岗，覆盖主流容器云平台核心技术，由李振良老师主讲，共8个大的章节，包含工具共计20G
分类：
Web程序 时间：
2020-11-02 10:30:51
阅读次数：
24
跟光磊学Linux运维-Windows安装Ubuntu服务版跟光磊学Linux运维 Ubuntu简介Ubuntu(乌班图)早期是一个开源的GNU/Linux操作系统，Ubuntu是基于Debian的GNU/Linux,支持x86,amd64(即x64)和pcc架构，由全球专业的开发团队(Canoni... ...
容器的诞生在传统的软件部署方式中，程序员需要把要发布的应用程序打成包发给运维人员，然后由运维人员在生产环境进行部署。当随着应用的版本迭代越来越多，应用的依赖库版本错综复杂，往往会出现开发环境和生产环境不一致的情况发生，而且由于多数情况下采用微服务的架构，每个团队都有可能使用不同版本的依赖库，并有可能在升级的时候替换掉他们，因而同一个应用程序采用相同版本的依赖库是多么的重要。当应用程序比较少或者都是
分类：
其他好文 时间：
2020-11-02 09:48:24
阅读次数：
27
系统性能一直是个热门话题。做运维这几年也一直在搞性能调优，写这个文章也算是对工作的总结。 讲调优第一步是，要讲为什么要调优？也就是系统分析，分析还需要有指标，做好性能监控的情况下，看到确实需要调优才能进行。不能为了调优而 “调优“ 那不是调优，那是破坏。 性能分析的目的 找出系统性能瓶颈 为以后的优 ...
分类：
系统相关 时间：
2020-11-01 22:30:21
阅读次数：
32
设计模式（七）——抽象工厂模式在设计模式（五）——工厂方法模式和设计模式（六）——JDK中的那些工厂方法中介绍了工厂方法模式。本文将介绍另外一种工厂模式——抽象工厂模式。工厂模式的简单回顾在介绍了简单工厂模式和工厂方法模式之后，相信很多人对工厂模式（如果单独提到工厂模式，即包括简单工厂模式、工厂方法模式及本文即将介绍的抽象工厂模式）的思想都有了一定的理解。这里我们在简单回顾一下。工厂模式的主要功能
分类：
其他好文 时间：
2020-11-01 21:52:28
阅读次数：
14
