起因:工作需要,我需要每5分钟从hbase中,导出一部分数据,然后导入到ES中,但是在开始阶段编写的python脚本,我发现从hbase读取数据的速度较慢,耗费大量的时间,影响整个导数过程,恐怕无法在5分钟内完成导数工作
在咨询了老人后,采取部门优化策略,并记录了实验结果。...
分类:
其他好文 时间:
2014-10-24 14:42:18
阅读次数:
205
机器学习实战中也详细描述了梯度上升算法,附件里是一些笔记,再贴一个还不错的帖子转http://blog.csdn.net/wyb_009/article/details/9205151这个算法搞得 我晚上十点打电话给弟弟,问Ln(x),1/x的导数公式。很惭愧,大学时被我用的出神入化、化成灰我都能认...
分类:
编程语言 时间:
2014-10-24 10:24:57
阅读次数:
894
函数在点的梯度就被定义为向量:与射线同方向的单位向量被定义为:于是方向导数变成了:函数在某点的梯度是这样一个向量,它的方向与取得最大方向导数的方向一致,而它的模为方向导数的最大值。
分类:
其他好文 时间:
2014-10-22 12:46:29
阅读次数:
149
harris 作为最常用的特征点检测算法。
第一个文件harris.py
from scipy.ndimage import filters
from numpy import *
from pylab import *
def compute_harris_response(im,sigma=3):
imx=zeros(im.shape)#计算导数
filters....
分类:
编程语言 时间:
2014-10-15 00:15:19
阅读次数:
851
1.最速下降方向函数f(x)在点x处沿方向d的变化率可用方向导数来表示。对于可微函数,方向导数等于梯度与方向的内积,即:Df(x;d)=▽f(x)Td,因此,求函数f(x)在点x处的下降最快的方向,可归结为求解下列非线性规划:min▽f(x)Tds.t.||d||≤1当d=-▽f(x)/||▽f(x...
分类:
其他好文 时间:
2014-10-14 23:45:09
阅读次数:
479
原文链接1原文链接28什么叫边界条件?有何物理意义?它与初始条件有什么关系?边界条件与初始条件是控制方程有确定解的前提。边界条件是在求解区域的边界上所求解的变量或其导数随时间和地点的变化规律。对于任何问题,都需要给定边界条件。初始条件是所研究对象在过程开始时刻各个求解变量的空间分布情况,对于瞬态问题...
分类:
其他好文 时间:
2014-10-13 18:00:19
阅读次数:
683
众所周知,反向传播算法很难调试和得到正确结果,特别是在执行过程中存在许多细小难以察觉的错误。这里介绍一种方法来确定代码中导数的计算是否正确。使用这里所述求导检验方法,可以帮助提升写正确代码的信心。假设我们想最小化关于的函数 . 对于这个例子,假设,所以. 在一维空间,梯度下降的一次迭代公式如下:假设...
分类:
其他好文 时间:
2014-10-13 12:46:39
阅读次数:
304
原文链接由拓扑学中表面(Surface)的定义及实例引入楔积的概念。基础知识先看Surface在欧几里得空间内的定义:所有在Omega中的点w(参数空间中的点)被记作:对应在R3中(欧几里德空间里的点)记作:w的雅各比矩阵X_{\star}(w的一阶偏导数以一定次序排列成的矩阵)定义如下:用雅各比矩...
分类:
其他好文 时间:
2014-10-12 22:46:38
阅读次数:
315
原文链接导数是指某一点的导数表示了某点上指定函数的变化率。比如,要确定某物体的速度在某时刻的加速度,就取时间轴上下一时刻的一个微小增量,然后考察速度的增量和时间增量的比值。如果这个比值比较大,说明单位时间内速度的改变量大,反之就小。注意的是,只有当时间轴上的微小增量的极限趋于零时,这个比值才是考察的...
分类:
其他好文 时间:
2014-10-12 19:01:58
阅读次数:
231
设(x1, y1), (x2,y2), ...(xk,yk)为输入样本,注意这里的xi本身是一个向量。
假设拟合多项式为:
则通过使用下面的最小平方差拟合方法:
可得:
拟合过程变成求上式的最小值,相信学过高数的童鞋应该都知道怎么求,对的以此对系数a0,a1....求偏导数,使其为零,最后可得K+1组方程:
.......................
...
分类:
其他好文 时间:
2014-10-08 18:22:55
阅读次数:
180