在使用tf.log时，如果输入为0.则loss为nan 这时使用 tf.clip_by_value(1-y,1e-10,1.0)将一个张量中的数值限制在一个范围之内。（可以避免一些运算错误:可以保证在进行log运算时，不会出现log0这样的错误或者大于1的概率） tf.clip_by_value(1 ...
分类：
其他好文 时间：
2020-06-05 10:26:51
阅读次数：
218
（1）CPU CPU个数：cat /proc/cpuinfo | grep "physical id" | uniq | wc -l CPU核数：cat /proc/cpuinfo | grep "cpu cores" | uniq CPU型号：cat /proc/cpuinfo | grep 'm ...
分类：
系统相关 时间：
2020-06-03 15:36:18
阅读次数：
91
【python】参数收集与逆向参数收集 参数收集 python中允许在形参前面添加一个星号(*)，这样就意味着该参数可接收多个参数值，多个参数值被当成元组传入。 def test(a, *books): print(books) #books被当成元组处理 for b in books: print ...
分类：
编程语言 时间：
2020-05-31 12:50:34
阅读次数：
140
GPU vs CPU GPU： GPU比CPU有更多的核，但是单个核运行很慢，它们之前其实是相互合作而不是单独运行，所以不能直接以cores to cores这样直接比较。 优点是，因为有更多的核，所以在做并行任务，且本质相近的事务时，GPU的处理能力很棒 ...
分类：
其他好文 时间：
2020-05-26 12:28:20
阅读次数：
68
相关度研究记录手稿 1.orderNum字段相关度 增强 score = math.sqrt(orderNum*0.001) ScoreFunctionBuilder<?> dateFieldValueScoreFunction = ScoreFunctionBuilders.fieldValueF ...
分类：
其他好文 时间：
2020-05-22 12:51:01
阅读次数：
62
网上看到的关于Executor，Cores和Memory的分配相关博客，先记录下来，再汇总。 <1>第一篇 Spark处理多少数据是否需要多少内存 Spark处理1Tb数据不需要1Tb的内存。 具体需要多少内存是根据executor的core数量和每次读取数据集的block大小决定的。以读取hdfs ...
分类：
其他好文 时间：
2020-05-19 16:47:03
阅读次数：
82
有序集合（sorted set）用于存储多个字符串元素，它是在集合（set）的基础上给每个元素增加了一个用于 排序的字段（SCORE） ，元素同样不可重复，可以根据分数索引获取元素，此外，提供了根据score获取指定范围以及排序功能 常用命令 添加 zadd ：添加数据，返回元素个数 查询 zran ...
分类：
其他好文 时间：
2020-05-11 01:28:27
阅读次数：
86
spark实现UserCF package cf import breeze.numerics.{pow, sqrt} import org.apache.spark.sql.SparkSession object UserCF { def main(args: Array[String]): Un ...
分类：
其他好文 时间：
2020-04-23 01:08:59
阅读次数：
146
一、集群服务器配置说明（整个过程中我会提前把一些小坑填上，有的坑后面没有提到） IP 节点名 OS Cores Memory Disk Remark 172.25.16.1 cdh1 CentOS7.5 40 128 4T cloudera Server、cloudera agent 172.25. ...
分类：
其他好文 时间：
2020-04-16 18:00:39
阅读次数：
332
7.7 数组 数组是Go语言编程中最常用的数据结构之一。顾名思义，数组就是指一系列同一类型数据的集合。数组中包含的每个数据被称为数组元素(element)，一个数组包含的元素个数被称为数组的长度。 以下为一些常规的数组声明方法: [32]byte // 长度为32的数组，每个元素为一个字节 [2*N ...
分类：
编程语言 时间：
2020-04-15 00:55:02
阅读次数：
75
