一、grep常用：grep[-acinv]‘搜寻字符串‘filename参数说明：-a：将binary档案以text档案的方式搜寻数据-c：计算找到‘搜寻字符串‘的次数-i：忽略大小写的不同，所以大小写视为相同-n：顺便输出行号-v：反向选择，亦即显示出没有‘搜寻字符串‘内容的那一行！1.搜索特定的字符grep‘..
分类：
其他好文 时间：
2016-06-24 22:17:04
阅读次数：
482
MD5 MD5算法具有以下特点：1、压缩性：任意长度的数据，算出的MD5值长度都是固定的。2、容易计算：从原数据计算出MD5值很容易。3、抗修改性：对原数据进行任何改动，哪怕只修改1个字节，所得到的MD5值都有很大区别。4、强抗碰撞：已知原数据和其MD5值，想找到一个具有相同MD5值的数据（即伪造数 ...
分类：
编程语言 时间：
2016-06-18 19:55:40
阅读次数：
179
对于C语言而言，实现哈希表加深指针的运用。哈希表是典型空间换时间的算法，解决冲突有多种，以下采用链条式。 以下是本人造的轮子，做一个记录。 hash.c 链条哈希表算法插入一个数据思路是： 1：开辟一个初始数组作为哈希表（如果空间没问题越大越好）； 2：根据新插入的数据计算出对应哈希值作为哈希表的索 ...
分类：
其他好文 时间：
2016-06-17 16:44:13
阅读次数：
228
企业必须思索：你为什么需要大数据?要做大数据，最大的挑战就是有很多未知，也需要很多投资，像红门互动就投资数据分析工具、人员，甚至是储存设备。蒐集回来的多为杂乱数据，数据杂乱则代表资
讯源不一致，所以红门互动有70%的时间都在做数据清洗，再进入分析过程做数据计算?.
分类：
其他好文 时间：
2016-06-13 19:27:51
阅读次数：
173
数据库系统工程师考试的要求为：掌握计算机体系结构以及各主要部件的性能和基本工作原理；掌握操作系统、程序设计语言的基础知识，了解编译程序的基本知识；熟练掌握常用数据结构和常用算法；熟悉软件工程和软件开发项目管理的基础知识；熟悉计算机网络的原理和技术；掌握数据..
分类：
数据库 时间：
2016-06-06 19:07:51
阅读次数：
301
MapReduce如何解决负载均衡和数据倾斜：阶段主要出在Map作业结束后，shuffer（洗牌）过程中，如何将map处理后的结果分成多少份，交由Reduce作业，使得每部分reduce作业尽可能均衡处理数据计算。系统默认将partitions按照Hash模运算分割（存储对象的hash值与reduce的个数取模）..
分类：
其他好文 时间：
2016-06-04 18:05:09
阅读次数：
268
概念解释：Message Digest（摘要） Algorithm （算法） ： 信息摘要算法第五版 就是把任意长度的字节串编程一个一定长的十六进制数字串 特点 1、压缩性：任意长度的数据，算出的MD5值长度都是固定的。 2、容易计算：从原数据计算出MD5值很容易。 3、抗修改性：对原数据进行任何改 ...
分类：
其他好文 时间：
2016-06-03 21:05:22
阅读次数：
244
Matlab作为数据计算和处理的数学语言(软件)，而LaTex作为出版界的重要排版语言(软件)，尤其是对数学公式的排版功能特别强。在Matlab中有两种方法使用LaTeX：1）对Matlab生成的图形标注时，2）Matlab的计算结果转化成LaTeX格式。 1） 对Matlab生成的图形标注 Mat ...
分类：
其他好文 时间：
2016-05-27 21:43:18
阅读次数：
162
本期内容：1、Executor的WAL容错机制2、消息重放Executor的安全容错主要是数据的安全容错，那为什么不考虑数据计算的安全容错呢？原因是计算的时候SparkStreaming是借助于SparkCore上RDD的安全容错的，所以天然的安全可靠的。Executor的安全容错主要有：1、数据副本：有两种方..
分类：
其他好文 时间：
2016-05-23 19:25:31
阅读次数：
207
题目描述 输入一个int型数据，计算出该int型数据在内存中存储时1的个数。 输入描述 输入一个整数（int类型） 输出描述 这个数转换成2进制后，输出1的个数 输入样例 输出样例 测试代码1 测试代码2 ...
分类：
其他好文 时间：
2016-05-23 10:20:56
阅读次数：
101
