【导语】：在深度强化学习第四篇中，讲了Policy Gradient的理论。通过最终推导得到的公式，本文用PyTorch简单实现以下，并且尽可能搞清楚torch.distribution的使用方法。代码参考了LeeDeepRl-Notes中的实现。 1. 复习 \[ \theta \leftarro ...
分类：
其他好文 时间：
2021-01-16 12:16:36
阅读次数：
0
维度缓慢变化维SCD(Slowly Changing Dimensions)一些维度表的数据不是静态的，而是会随着时间而缓慢地变化(这里的缓慢是相对事实表而言，事实表数据变化的速度比维度表快，如果还不知道什么是事实表和维度表请看→数仓模型设计详细讲解)把处理维度表数据历史变化的问题，称为缓慢变化维问 ...
分类：
其他好文 时间：
2021-01-16 11:43:49
阅读次数：
0
此篇博客主要记录使用递归求解的树相关的算法题。 一、二叉树的最大深度 104. 给定一个二叉树，找出其最大深度。 （easy） 2021-01-13 二叉树的深度为根节点到最远叶子节点的最长路径上的节点数。 说明: 叶子节点是指没有子节点的节点。 示例：给定二叉树 [3,9,20,null,null ...
分类：
其他好文 时间：
2021-01-15 12:07:22
阅读次数：
0
引言 说到 C++ 的内存管理，我们可能会想到栈空间的本地变量、堆上通过 new 动态分配的变量以及全局命名空间的变量等，这些变量的分配位置都是由系统来控制管理的，而调用者只需要考虑变量的生命周期相关内容即可，而无需关心变量的具体布局。这对于普通软件的开发已经足够，但对于引擎开发而言，我们必须对内存 ...
分类：
编程语言 时间：
2021-01-15 12:06:28
阅读次数：
0
git clone https://github.com/pwndbg/pwndbgcd pwndbg sudo ./setup.sh ...
分类：
数据库 时间：
2021-01-15 11:43:25
阅读次数：
0
注：使用kube-prometheus安装非常方便，前面的prometheus+grafana+metrics-server都不用安装，已经集成在里面。 1、clone github地址 git clone https://github.com/coreos/kube-prometheus.git ...
分类：
Web程序 时间：
2021-01-14 11:25:19
阅读次数：
0
爬取电影网站 movie.py import scrapyfrom MyProjectDianying.items import MyprojectdianyingItemclass MovieSpider(scrapy.Spider): name = 'movie' # allowed_domai ...
分类：
编程语言 时间：
2021-01-14 11:19:48
阅读次数：
0
我这里GPU型号为 tesla T4, 算力为7.5，会有一些特殊处理。首先是我不会在Dockerfile中编译caffe 本次环境安装通过Dockerfile安装，如果按照本教程要先安装docker以及nvidia-docker 1. 下载caffe的代码 git clone https://gi ...
分类：
其他好文 时间：
2021-01-14 10:35:24
阅读次数：
0
随着国家信息安全需求的不断增强，政企办公设备国产化将是大趋势。瑞芯微Rockchip RK3399深度适配麒麟、元心、技德等国产系统，一系列搭载RK3399的办公平板电脑、类PC、2in1平板已广泛应用于政企办公，全面助力推动政企办公设备国产化。 政企办公PC形态 RK3399是Rockchip高性 ...
分类：
其他好文 时间：
2021-01-13 11:25:29
阅读次数：
0
Ubuntu16.04+window10两个系统都实现了 Ubuntu系统安装方法： 参考地址：http://ddrv.cn/a/320291 环境要求： 安装gym pip install gym 安装环境： git clone https://github.com/openai/multiage ...
分类：
其他好文 时间：
2021-01-13 10:53:15
阅读次数：
0
