工作中使用MapReduce任务导出一批含有路径的文件，共计行数300W+，需要检测文件是否在对应的服务器中存在，而文件所在的服务器并非hadoop集群的服务器，因此打算采用bash脚本进行。具体的方法如下(可直接看方法2,方法1效率较低)： 2. 采用的方法 a. 方法1 原本打算使用如下脚本，进 ...
分类：
系统相关 时间：
2017-01-21 14:57:01
阅读次数：
155
包边去噪算法之二：
首先谈一下什么是非局部均值滤波。在此之前，我们先来看一下均值滤波的原理。
均值滤波
均值滤波的计算非常简单，将图像像素点灰度记录在数组中，然后设置方框半径的值，然后将方框中的...
分类：
编程语言 时间：
2017-01-20 23:43:08
阅读次数：
935
在使用 find命令的-exec选项处理匹配到的文件时， find命令将所有匹配到的文件一起传递给exec执行。但有些系统对能够传递给exec的命令长度有限制，这样在find命令运行几分钟之后，就会出现溢出错误。错误信息通常是“参数列太长”或“参数列溢出”。这就是xargs命令的用处所在，特别是与f ...
分类：
系统相关 时间：
2017-01-20 17:52:58
阅读次数：
199
http://codeforces.com/problemset/problem/755/C 题意：该图是类似于树，给出n个点，接下来p[i]表示在树上离 i 距离最远的 id 是p[i]，如果距离相等则p[i]是 id 较小的点。 思路：一开始没什么想法，画几分钟图发现不到什么东西，后来想着 i ...
分类：
数据库 时间：
2017-01-17 07:40:03
阅读次数：
252
工作中午时间出来办一个证明，需要户籍证明，而自己现在还是集体户口，先去人才中心打印证明，很快，心里还在表扬现在政府单位效率真高，没想到接下来才让我知道自己想多了，还要去派出所盖章，然后跑到指定派出所一看前面有4个人在等一个人在办，感觉应该会很快，没想到又一次超出自己的预期，一个正在办理的人十几分钟后 ...
分类：
其他好文 时间：
2017-01-14 19:52:56
阅读次数：
144
window.onload = function(){ var show_times = $(".times span"); for(var i=0;i<show_times.length;i++){ var dateStr = show_times[i].innerHTML; var dateTi ...
分类：
Web程序 时间：
2017-01-09 00:18:43
阅读次数：
339
我们在评论中往往会看到多少天前，多少小时前。 实现原理：现在时间-过去时间 得到的时间差来做比较 下面我定义了一个Helper类，大家直接引用即可，参数就是时间差，注意时间差类型是TimeSpan类型，而不是DateTime类型哦~ TimeHelper.cs ...
我们的java服务器集群在发布的时候，会出现刚发布的服务器load飙高（超过cpu核数）的问题，过几分钟才能回到低位，分析了好久也没发现什么原因。经过查阅相关资料，我们意识到jvm在刚启动时，性能并不是最好的状态，在随后的运行过程中，它会自动分析热点（运行频率高的的代码..
分类：
编程语言 时间：
2017-01-06 22:51:09
阅读次数：
390
一、域名解析过程 1. 浏览器检查自身缓存，缓存时间为几分钟到小时不等，通过设置TTL属性确定。 2. 若1未找到，则查OS缓存，如windows下的host文件，linux的/etc/hosts文件。 3. 查询本地域名服务器LDNS，即系统配置的DNS服务器地址，一般为SPA(互联网应用提供商) ...
分类：
其他好文 时间：
2017-01-06 10:38:52
阅读次数：
278
在使用 find命令的-exec选项处理匹配到的文件时， find命令将所有匹配到的文件一起传递给exec执行。但有些系统对能够传递给exec的命令长度有限制，这样在find命令运行几分钟之后，就会出现溢出错误。错误信息通常是“参数列太长”或“参数列溢出”。这就是xargs命令的用处所在，特别是与f ...
分类：
系统相关 时间：
2017-01-01 10:53:28
阅读次数：
269
