针对马尔科夫模型不完全已知，即转移概率未知，不能全概率展开的情况，上一篇介绍了策略评估的方法，这一篇对应介绍策略改进的方法，分别是 针对每一个完整决策过程，先估计策略再改进策略的蒙特卡洛同策略学习方式； 针对完整决策过程中的每一步状态动作对生成，评估改进同一个策略$\pi$的时序差分同策略Sarsa ...
分类：
其他好文 时间：
2018-12-18 21:22:30
阅读次数：
279
You have a bucket with 3 red balls and 3 green balls. Assume that once you draw a ball out of the bucket, you don't replace it. What is the probabilit ...
分类：
其他好文 时间：
2018-12-04 20:02:50
阅读次数：
174
非关系型数据库，又被称为NoSQL（Not Only SQL )，意为不仅仅是SQL（ Structured QueryLanguage，结构化查询语言)，据维基百科介绍，NoSQL最早出现于1998 年，是由Carlo Storzzi最早开发的个轻量、开源、不兼容SQL 功能的关系型数据库。 No ...
分类：
数据库 时间：
2018-11-21 15:58:10
阅读次数：
188
method1: BaoXing ref: Curb Intersection Feature Based Monte Carlo Localization on Urban Roads segmentation of laser scan 1. piecewise function of lase ...
分类：
其他好文 时间：
2018-11-16 17:31:21
阅读次数：
163
蒙特卡洛（Monte Carlo）法是一类随机算法的统称。随着二十世纪电子计算机的出现，蒙特卡洛法已经在诸多领域展现出了超强的能力。在机器学习和自然语言处理技术中，常常被用到的MCMC也是由此发展而来。本文通过蒙特卡洛法最为常见的一种应用——求解定积分，来演示这类算法的核心思想。 无意识统计学家法则 ...
分类：
其他好文 时间：
2018-10-04 11:26:50
阅读次数：
199
今天闲来无事，写点东西吧 模拟退火 首先模拟退火是个什么东西呢？ _模拟退火算法(Simulated Annealing，SA)最早的思想是由N. Metropolis 等人于1953年提出。1983 年,S. Kirkpatrick 等成功地将退火思想引入到组合优化领域。它是基于Monte Car ...
分类：
其他好文 时间：
2018-10-02 22:15:13
阅读次数：
238
随机算法 1. 蒙特卡罗模拟 蒙特卡罗（Monte Carlo）方法，又称随机抽样或统计试验方法，是以概率和统计理论方法为基础的一种计算方法使用随机数（或更常见的伪随机数）来解决很多计算问题的方法。将所求解的问题同一定的概率模型相联系，用电子计算机实现统计模拟或抽样，以获得问题的近似解。 ① π的计 ...
分类：
其他好文 时间：
2018-09-20 01:06:15
阅读次数：
208
如图，刷微博时，看到一个问题，第一个想到的就是用蒙特卡洛方法求解，当时正在练python，于是尝试用python编写程序。 ...
分类：
其他好文 时间：
2018-09-06 20:34:23
阅读次数：
174
蒙特·卡罗分子模拟计算 蒙特·卡罗分子模拟计算 使用蒙特·卡罗方法进行分子模拟计算是按照以下步骤进行的： 1． 使用随机数发生器产生一个随机的分子构型。 2． 对此分子构型的其中粒子坐标做无规则的改变，产生一个新的分子构型。 3． 计算新的分子构型的能量。 4． 比较新的分子构型于改变前的分子构型的 ...
分类：
其他好文 时间：
2018-08-07 21:58:12
阅读次数：
172
1、MCMC概述 从名字我们可以看出，MCMC由两个MC组成，即蒙特卡罗方法（Monte Carlo Simulation，简称MC）和马尔科夫链（Markov Chain ，也简称MC）。之前已经介绍过蒙特卡洛方法，接下来介绍马尔科夫链，以及结合两者的采样算法。 2、马尔科夫链 马尔科夫链的概念在 ...
分类：
编程语言 时间：
2018-07-24 13:16:04
阅读次数：
208
