码迷,mamicode.com
首页 >  
搜索关键字:机器学习 softmax logistic 回归    ( 13515个结果
POJ 3270 Cow Sorting
这道题运用了置换的知识。 题目大意: 用两两交换的方式给一个数列排序,每交换一次的代价是这两个数之和求最小代价。 解题思路: 对于这种情况,我们在数列中找置换环。每个置换环内的数都是可以回归到它应有的位置上并且不影响其他的置换环。 置换环归位的代价有两种,第一种是用环内最小的数与其他数交换,另一种是用整个数列中最小的数与环内最小的数交换,完成环内所有数的归位后在换...
分类:其他好文   时间:2014-07-26 15:18:00    阅读次数:186
Logistic Regression
1.model specificationbinomial logistic regression model是一种分类模型。条件概率分布为: 伯努利分布其中, 2.Maximum Likelihood Estimation由于Hessian矩阵正定,因此NLL是个凸函数,有全局最小值。可以使用梯度...
分类:其他好文   时间:2014-07-26 14:11:14    阅读次数:196
我所写的CNN框架 VS caffe
一个月前,自己模仿caffe实现了一个卷积神经网络的框架。 一个月前,自己模仿caffe实现了一个卷积神经网络的框架。 相同点 1无缝支持CPU和GPU模式,GPU模式使用cuda实现。 不同点 1我的CNN不依赖与任何第三方的函数库,caffe用到了第三方的数学函数库(cublas和mkl)来做矩阵操作。 其实区别就在于...
分类:其他好文   时间:2014-07-26 02:17:46    阅读次数:334
机器学习与数据挖掘中的十大经典算法
机器学习与数据挖掘中的十大经典算法背景:top10算法的前期背景是吴教授在香港做了一个关于数据挖掘top10挑战的一个报告,会后有一名内地的教授提出了一个类似的想法。吴教授觉得非常好,开始着手解决这个事情。找了一系列的大牛(都是数据挖掘的大牛),都觉得想法很好,但是都不愿自己干。原因估计有一下几种:...
分类:其他好文   时间:2014-07-26 01:15:56    阅读次数:248
对数据方向的一些感慨
本来以为可以将《实战机器学习》的代码全部实现完,殊不知到了支持向量机这一章,仅是为了理清概念,我找出高数线代概统重识拉格朗日乘数、向量空间、最小二乘法,为了理解非线性情况时用到的核技术去查阅曼瑟定理...
分类:其他好文   时间:2014-07-25 00:00:26    阅读次数:290
大数据时代的机器学习
张长水:大数据时代的机器学习 VS 传统机器学习 从机器学习角度看,“大数据”指的是数据量大,数据本身不够精确,数据混杂,数据自然产生。机器学习对大数据的处理的两个挑战: 数据量大导致计算困难 分布在不同服务器上的数据存在一定联系,这些数据基本上不满足“独立同分布”假设,传统的模型和算法很难适应。 大数据时代给机器学习带来新的机遇: 在某些应用条件下,高维空间中的局部数据变得稠密。这个现象可以为分类器的设计提供更丰富的信息。甚至使分类器在性能上接近理论极限性能。 大数据使样本空间原本“空旷”的区域出现样本,...
分类:其他好文   时间:2014-07-24 23:37:33    阅读次数:370
广义线性模型(logistic和softmax)
广义线性模型(generalized linear model)正是在普通线性模型的基础上,将上述四点模型假设进行推广而得出的应用范围更广,更具实用性的回归模型。此模式假设实验者所量测的随机变量的分布函数与实验中系统性效应(即非随机的效应)可经由一链结函数(link function)建立起可资解释...
分类:其他好文   时间:2014-07-24 22:51:23    阅读次数:271
概念介绍(机器学习)
似然函数:似然函数在形式上就概率密度函数。 似然函数用来估计某个参数。最大似然函数:就是求似然函数的最大值。 最大似然函数用于估计最好的参数。最小二乘法:它通过最小化误差的平方和寻找数据的最佳函数匹配。就是求 y=a1+a2x的系数。通过最小化误差的平方,然后求系数的偏导数,令导数为0,求...
分类:其他好文   时间:2014-07-24 22:50:53    阅读次数:261
集成学习 概念介绍
集成学习(Esemble learning) 在机器学习领域,如何根据观察数据学习一个精确的估计数据是一个主要问题。 通常,我们通过训练数据应用某个算法得出一个训练模型,然后使用评估数据来评估这个模型的预测正确率,最后如果我们可以接受这个正确率就使用该模型进行预测数据。通常我们将训练数据进行交叉.....
分类:其他好文   时间:2014-07-24 17:32:05    阅读次数:234
Softmax回归
1. softmax回归模型 softmax回归模型是logistic回归模型在多分类问题上的扩展(logistic回归解决的是二分类问题)。 对于训练集,有。 对于给定的测试输入,我们相拥假设函数针对每一个类别j估算出概率值。也就是说,我们估计得每一种分类结果出现的概率。因此我们的假设函数将...
分类:其他好文   时间:2014-07-24 12:09:45    阅读次数:335
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!