码迷,mamicode.com
首页 > 其他好文 > 详细

『cs231n』线性分类器最优化

时间:2017-06-10 22:34:09      阅读:249      评论:0      收藏:0      [点我收藏+]

标签:dom   max   ==   randn   oss   pytho   oat   方案   for   

 

 最优化策略

1.差劲的方案,随机搜索

bestloss = float(‘inf‘)  # 无穷大
for num in range(1000):
    W = np.random.randn(10, 3073) * 0.0001
    loss = L(X_train, Y_train, W)
    if loss < bestloss:
        bestloss = loss
        bestW = W

scores = bsetW.dot(Xte_cols)
Yte_predict = np.argmax(score, axis = 0)
np.mean(Yte_predict == Yte)

核心思路:迭代优化

2.浪费的方案,随机本地搜索

W = np.random.randn(10, 3073) * 0.001
bestloss = float(‘inf‘)
for i in range(1000):
    step_size = 0.0001
    Wtry = np.random.randn(10, 3073) * step_size
    loss = L(Xtr_cols, Ytr, Wtry)
    if loss < bestloss:
        W = Wtry
        bestloss = loss

 3.跟随梯度

 

『cs231n』线性分类器最优化

标签:dom   max   ==   randn   oss   pytho   oat   方案   for   

原文地址:http://www.cnblogs.com/hellcat/p/6979951.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!