第一步:配置网络(静态IP) (网卡名称可能不同) 1. 修改: 将该配置文件中的ONBOOT=no修改为yes(网络开机自启) 将BOOTPROTO=dhcp修改为static(将ip设置为静态ip) 2. 为了能够通过外部访问到虚拟机,增加: IPADDR=192.168.154.110(110 ...
分类:
其他好文 时间:
2020-05-17 20:35:34
阅读次数:
76
distinct的底层使用reducebykey巧妙实现去重逻辑 //使用reduceByKey或者groupbykey的shuffle去重思想rdd.map(key=>(key,null)).reduceByKey((key,value)=>key) .map(_._1) ...
分类:
其他好文 时间:
2020-05-17 19:29:13
阅读次数:
147
题目内容 题目: 手里面n张不同牌面的牌,编写一个洗牌程序,让随机取出一张牌的概率相同。 要求: 说明算法思路、分析时间复杂度、用Array编写洗牌程序、编写测试用例。 算法思路 时间复杂度 时间复杂度应该为:O(n) 实现程序 下面给出4种实现方法、比较各种方法的好坏,其中shuff ...
分类:
其他好文 时间:
2020-05-14 23:53:40
阅读次数:
82
Python中的random模块用于生成随机数。 import random # 1.随机小数 print(random.random()) #大于0且小于1之间的随机小数 print(random.uniform(1,3)) #大于1且小于3的随机小数 # 2.随机整数 print(random. ...
分类:
编程语言 时间:
2020-05-08 16:13:40
阅读次数:
74
深度学习中有众多有效的优化函数,比如应用最广泛的SGD,Adam等等,而它们有什么区别,各有什么特征呢?下面就来详细解读一下 一、先来看看有哪些优化函数 BGD 批量梯度下降 所谓的梯度下降方法是无约束条件中最常用的方法。假设f(x)是具有一阶连续偏导的函数,现在的目标是要求取最小的f(x) : m ...
分类:
其他好文 时间:
2020-05-03 10:58:21
阅读次数:
56
7.3 Using std::ref() and std::cref() 7.3 使用std::ref()和std::cref() Since C++11, you can let the caller decide, for a function template argument, whethe ...
分类:
其他好文 时间:
2020-05-02 19:21:26
阅读次数:
82
1.sklearn 分层抽样 StratifiedShuffleSplit https://blog.csdn.net/m0_38061927/article/details/76180541 这个给的例子还不错 from sklearn.model_selection import Stratif ...
分类:
其他好文 时间:
2020-05-01 22:20:51
阅读次数:
110
深度学习调参技巧 训练技巧对深度学习来说是非常重要的,作为一门实验性质很强的科学,同样的网络结构使用不同的训练方法训练,结果可能会有很大的差异。 1.参数初始化 下面几种方式,随便选一个,结果基本都差不多。但是一定要做。否则可能会减慢收敛速度,影响收敛结果,甚至造成Nan等一系列问题。 下面的n_i ...
分类:
其他好文 时间:
2020-05-01 16:43:26
阅读次数:
63
关于微信扫码登录的2种解决办法 1 因为之前写过微信的扫码登录 所以朋友有这个需求的时候 我直接让他去 微信开放平台去注册 https://open.weixin.qq.com/ 当然是这里了, 因为是网站上的需求 所以 https://developers.weixin.qq.com/doc/op ...
分类:
微信 时间:
2020-04-20 11:53:08
阅读次数:
362
1. 概述 1.1 hive的特征: 可以通过SQL轻松访问数据的工具,从而实现数据仓库任务,如提取/转换/加载(ETL),报告和数据分析; 它可以使已经存储的数据结构化; 可以直接访问存储在Apache HDFS或其他数据存储系统(如Apache HBase)中的文件; Hive除了支持MapRe ...
分类:
其他好文 时间:
2020-04-19 19:49:32
阅读次数:
86