这两部分内容比较少，都是直觉上的例子和非正式的定义，当然这本书中绝大多数定义都是非正式的，但方便理解。后面深入之后会对这两个章节有详细的阐述。 ...
分类：
其他好文 时间：
2016-08-25 23:30:34
阅读次数：
160
PRML Study Note - Chapter 1.3-1.4 : Model Selection & the Curse of Dimensionality ...
分类：
其他好文 时间：
2016-06-21 06:26:50
阅读次数：
226
Evaluating a Learning Algorithm
Desciding What to Try Next
Evaluating a Hypothesis
Model Selection and Train/Validation/Test sets
Bias vs. Variance
Diagnosing Bias vs. Variance...
分类：
移动开发 时间：
2016-06-01 09:16:52
阅读次数：
491
原文：http://cos.name/2015/08/some-basic-ideas-and-methods-of-model-selection/ 作者：高涛 编辑：王小宁 0. 引言 有监督学习是日常使用最多的建模范式，它有许多更具体的名字，比如预测模型、回归模型、分类模型或者分类器。这些名字 ...
分类：
其他好文 时间：
2016-05-11 21:55:28
阅读次数：
1351
目录
1Bayesian model selection贝叶斯模型选择
1奥卡姆剃刀Occams razor原理
2Computing the marginal likelihood evidence
2-1 BIC approximation to log marginal likelihood
2-2贝叶斯因子
3先验
3-1 确定无信息先验分布的Jeffreys原则
3-2共轭先验Conjug...
分类：
其他好文 时间：
2016-04-05 10:50:57
阅读次数：
304
Linear regression with regularization当我们的λ很大时，hθ(x)≈θ0,是一条直线,会出现underfit；当我们的λ很小时(=0时)，即相当于没有做regularization,会出现overfit;只有当我们的λ取intermediate值时，才会刚刚好。那...
分类：
其他好文 时间：
2015-12-16 19:30:21
阅读次数：
505
User Guide 第三部分Model selection and evaluation1Cross-validation: evaluating estimator performance在同一数据集上学习预测函数的参数然后进行测试是一个方法上的错误：这种模型会得到一个很好的分数，让分类器重复看...
分类：
其他好文 时间：
2015-12-11 22:29:32
阅读次数：
270
Linear Model Selection and Regularization此博文是 An Introduction to Statistical Learning with Applications in R 的系列读书笔记，作为本人的一份学习总结，也希望和朋友们进行交流学习。该书是The ...
分类：
其他好文 时间：
2015-10-06 23:47:03
阅读次数：
6373
结论模型复杂度↑Bias↓Variance↓ 例子$y_i=f(x_i)+\epsilon_i,E(\epsilon_i)=0,Var(\epsilon_i)=\sigma^2$ 使用knn做预测，在点$x_0$处的Excepted prediction error： ...
分类：
其他好文 时间：
2015-08-14 01:00:23
阅读次数：
126
参考：http://scikit-learn.org/stable/model_selection.html
有待翻译，敬请期待：
3.1. Cross-validation: evaluating estimator performance
3.1.1. Computing cross-validated metrics
3.1.1.1. Obtain...
分类：
其他好文 时间：
2015-07-27 23:13:01
阅读次数：
215
