本文力求简化SMO的算法思想,毕竟自己理解有限,无奈还是要拿一堆公式推来推去,但是静下心看完本篇并随手推导,你会迎刃而解的。推荐参看SMO原文中的伪代码。
**1.SMO概念**
===========
上一篇博客已经详细介绍了[SVM原理](http://blog.csdn.net/luoshixian099/article/details/51073885),为了方便求解,把原始最优化问题转化成了其对偶问题,因...
分类:
编程语言 时间:
2016-04-29 16:06:47
阅读次数:
328
本系列学习笔记参考自OpenCV2.4.10之opencv\sources\samples\cpp\tutorial_code和http://www.opencv.org.cn/opencvdoc/2.3.2/html/genindex.html
SVM为支持向量机。它是一个分类器。简单说,SVM是通过我们一组训练样本来对平面进行一个最优的分割。
i...
分类:
其他好文 时间:
2016-04-29 15:03:33
阅读次数:
172
参考:http://www.cnblogs.com/jankie/archive/2012/07/04/2575695.html 一、Windows平台:使用cpu-Z即可查看。 二、Linux平台:在终端执行#cat /proc/cpuinfo(或#grep -E '(vmx|svm)' /pro ...
分类:
其他好文 时间:
2016-04-28 12:16:56
阅读次数:
163
上篇记录了一些决策树算法,这篇是借OC-SVM填回SMO在SVM中的数学推导这个坑。 参考文献: 这里回顾了SMO求解SVM的具体数学推导。同理SMO算法也可以用来求解OC-SVM,具体的求解的数学推导以后有空再写。 ...
分类:
其他好文 时间:
2016-04-27 20:37:57
阅读次数:
305
已经好久没写了,正好最近需要做分享所以上来写两篇,这篇是关于决策树的,下一篇是填之前SVM的坑的。 参考文献: ...
分类:
其他好文 时间:
2016-04-27 20:25:19
阅读次数:
393
编者按:本文收集了百来篇关于机器学习和深度学习的资料,含各种文档,视频,源码等。而且原文也会不定期的更新,望看到文章的朋友能够学到更多。
《Brief History of Machine Learning》
介绍:这是一篇介绍机器学习历史的文章,介绍很全面,从感知机、神经网络、决策树、SVM、Adaboost 到随机森林、Deep Learning.
《Deep Learnin...
分类:
其他好文 时间:
2016-04-27 11:01:08
阅读次数:
522
grep‘(vmx|svm)‘/proc/cpuinfoyuminstall-ykvmvirt-*libvirtbridge-utilsqemu-imglsmod|grepkvm(查看下是否装了KVM模块)modprobekvm-intel(重新安装)启动或重启libvirtd服务和messagebus服务/etc/init.d/libvirtdstart/etc/init.d/messagebusrestart创建虚拟机mkdir/data///..
分类:
其他好文 时间:
2016-04-24 06:30:06
阅读次数:
204
支持向量机SVM 原创性(非组合)的具有明显直观几何意义的分类算法,具有较高的准确率源于Vapnik和Chervonenkis关于统计学习的早期工作(1971年),第一篇有关论文由Boser、Guyon、Vapnik发表在1992年(参考文档见韩家炜书9.10节)思想直观,但细节异常复杂,内容涉及凸 ...
分类:
其他好文 时间:
2016-04-23 21:04:34
阅读次数:
335
分类:分类的意义 传统意义下的分类:生物物种预测:天气预报决策:yes or no分类的传统模型分类(判别分析)与聚类有什么差别?有监督学习,无监督学习,半监督学习 常见分类模型与算法 线性判别法距离判别法贝叶斯分类器决策树支持向量机(SVM)神经网络 文本挖掘典型场景 网页自动分类垃圾邮件判断评论 ...
分类:
编程语言 时间:
2016-04-23 18:12:03
阅读次数:
221
1.背景
Steffen Rendle于2010年提出Factorization Machines(下面简称FM),并发布开源工具libFM。FM的提出主要对比对象是SVM,与SVM相比,有如下几个优势
(1)对于输入数据是非常稀疏(比如自动推荐系统),FM可以,而SVM会效果很差,因为训出的SVM模型会面临较高的bias。
(2)FMs拥有线性的复杂度, 可以通过 primal 来优化而不依...
分类:
其他好文 时间:
2016-04-22 19:03:03
阅读次数:
263