本文主要研究了分布式强化学习，利用价值分布(value distribution)的思想，求出回报$Z$的概率分布，从而取代期望值(即$Q$值)。 Q-Learning Q-Learning的目标是近似Q函数，即在策略$\pi$下回报$Z_t$的期望值： \(Q^{\pi}(s,a)=\mathbb ...
分类：
其他好文 时间：
2020-11-06 01:12:19
阅读次数：
18
一、背景说明上一篇文章只是讲述了多站点穿过mpls域进行通信，本文专门从路由传输与数据传输两个维度详细讲解传输的过程，上文实验拓扑如下图所示，为了简单起见，只已客户A为例（紫色）进行描述二、路由传输层面R5与R1之间通过ospf1学习到5.5.5.5/32网络将5.5.5.5/32路由导入R1上的instanceA中，在bgp路由表中能看到5.5.5.5/32的起源路由器为R1，起源方式为inco
分类：
其他好文 时间：
2020-11-06 00:57:22
阅读次数：
17
Codeforces Round #680 C. Division 首先判断pi能否整除qi，不能这答案就是pi，否则，将$q_i$分解质因数，将qi的每个因子从pi中剔除成不能被$q_i$整除的数，pi剔除完后就是$x_i$，且$x_i$不能被$q_i$。记录个最大的$x_i$ 举例说明 \(p_ ...
分类：
其他好文 时间：
2020-11-04 19:08:12
阅读次数：
22
目前接入点大致分为硬AP和软AP两种。 硬AP是指拥有独立的CPU，能独立进行数据的相关处理，是一个独立完全的模块，常见的为市面上的无线路由器。 而软AP即无线网卡，通过驱动配置其工作模式为AP模式，实现接入点的功能，目前市面上多数的无线网卡都支持软AP的功能。以下为两者的对比表格 硬AP 软AP ...
分类：
其他好文 时间：
2020-11-04 18:52:20
阅读次数：
18
在树莓派上运行自己的程序的时候报了错误 Can't open /dev/mem: Permission denied RuntimeError: ws2811_init failed with code -5 (mmap() failed) ,看了网上好像没有什么解决办法,分享一个自己的 在命令行下 ...
分类：
其他好文 时间：
2020-11-04 18:20:31
阅读次数：
21
物联网的增长会影响企业及其接入的网络。物联网的业务方面对企业成本、收入和利润至关重要。经济地连接数十亿个物联网设备是一项挑战。引入低功耗广域(LPWA)蜂窝技术就是一种解决方案。 服务物联网设备 无线物联网设备的网络架构应： ? 支持远程通信 ? 低功耗和长电池寿命运行 ? 管理大量端点 ? 支持低 ...
分类：
其他好文 时间：
2020-11-04 17:46:13
阅读次数：
14
数据帧（Frame）：是一种信息单位，它的起始点和目的点都是数据链路层。数据包（Packet）：也是一种信息单位，它的起始和目的地是网络层。数据报（Datagram）：通常是指起始点和目的地都使用无连接网络服务的的网络层的信息单元。段（Segment）：通常是指起始点和目的地都是传输层的信息单元。消 ...
分类：
其他好文 时间：
2020-11-02 09:55:56
阅读次数：
23
物理层的作用 ◆ 连接不同的物理设备 ◆ 传输比特流（数字信号0、1） 信道的基本概念 ◆ 信道是往一个方向传送信息的媒体 ◆ 一条通信电路包含一个接收信道和一个发送信道 单工通信信道 ◆ 只能一个方向通信，没有反方向反馈的信道 ◆ 有线电视、无线电收音机等等 半双工通信信道 ◆ 双方都可以发送和接 ...
分类：
其他好文 时间：
2020-11-01 22:22:28
阅读次数：
21
由于架构原因，常见的国内源并不能直接使用于树莓派的 CentOS7(armv7hl) 上，需要其他方式，故作此备忘。 ...
分类：
其他好文 时间：
2020-11-01 22:15:53
阅读次数：
43
从AT&T、Verizon以及其他通信运营商的宣传推广中，人们很难忽视一个共同的信息：5G部署正在进行。现在的焦点主要集中在5G如何改变消费者行为上，例如几分钟内下载一部电影。5G带来的影响将是多方面的，企业最终将从更快的无线连接中获益，但不必在资本支出和持续经营方面投入大量资金。企业在准备遵循5G ...
分类：
其他好文 时间：
2020-11-01 22:05:07
阅读次数：
19
