MapReduce既是一个编程模型，也是一个计算组件，处理的过程分为两个阶段，Map阶段：负责把任务分解为多个小任务，Reduce负责把多个小任务的处理结果进行汇总。其中Map阶段主要输入是一对Key-Value，经过map计算后输出一对Key-Value值；然后将相同Key合并，形成Key-Value集合；再将这个Key-Value集合转入Reduce阶段，经过计算输出最终Key-Value结果集。
分类：
其他好文 时间：
2020-11-26 14:53:23
阅读次数：
6
pip install xx,经常由于网速，或者安装版本问题导致安装速度慢超时等问题， 现提供一个py镜像安装代码，安装库文件前执行下这个程序，可以很快下载 cmd 进入命令提示符 python .py文件位置 pip install xx 安装库的名称 import os ini="""[glob ...
分类：
编程语言 时间：
2020-11-25 13:05:41
阅读次数：
30
功能: 对数据分析并生成报告 把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。 #pattern 表示 AWK 在数据中查找的内容 #action 是在找到匹配内容时所执行的一系列命令。 #花括号（{}）不需要在程序中始终出现，但它们用于根据特定的模式对一系列指令进行分 ...
分类：
系统相关 时间：
2020-11-24 12:46:02
阅读次数：
10
在unix系统下一切皆文件，文件夹是文件的一种。设备也会对应到相应的文件类型。 基础知识： . 代表当前路径 ..代表上级目录（父目录） / 在路径的最前边的时候代表树根。在路径中间的时候只不过是路径分隔符 ~代表当前用户的工作主目录，操作系统可以同时多用户登陆的 绝对路径 从树根一步一步找/Use ...
分类：
系统相关 时间：
2020-11-17 12:18:43
阅读次数：
21
概念： 操作： 一、表格输入内容 1、 创建xml表格，写入appkey，参数名 2、另存为：文件类型为：csv格式，保存 3、右击新建文件选择打开工具，调为utf-8格式 4、完成表格操作 二、jmeter 1、创建线程 2、http请求：协议，ip地址（域名）请求方法，路径，根据数据接口来填写 ...
分类：
其他好文 时间：
2020-11-16 13:19:49
阅读次数：
4
1. input 与 button 为什么有空隙? - 要明白为什么,需要了解一下几点基础知识(耐心看完,你会发现竟如此简单) 1. input 与 button 都属于行级块元素,都具有文本特性, 2. html中有一个被称之为:空白文本分隔符的东东(即:html中,无论你在两个行级或行块级元素之 ...
分类：
其他好文 时间：
2020-11-10 11:19:35
阅读次数：
9
背景： 1.记录自己的成长历程（人生走一遭，总得留下些什么） 2.方便日后查阅。?PS：几个主流的平台写博客好像都要会markdown。 3.能帮助到同胞萌，也倍感欣慰。 废话不多说，开始记录 20201020 我是分隔符 命令 作用 ** //字体加粗。eg：**字体**?效果?字体   ...
分类：
其他好文 时间：
2020-11-07 17:29:16
阅读次数：
23
一、索引 1、索引概述 MySQL官方对索引的定义为：索引(index)是帮助mysql搞笑获取数据的数据结构(有序)。在数据之外，数据库系统还维护者满足特定查找算法的数据结构，这些数据结构以某种方式引用(指向)数据，这样就可以在这些数据结构上实现高级查找算法，这种歌数据结构就是索引。 左边是数据表 ...
分类：
数据库 时间：
2020-11-01 10:22:05
阅读次数：
19
在学io流遇到的路径中斜杠与反斜杠中遇到的问题的记录 1、编程中路径的分隔符该用哪个？ 代码如下： public class Demo01 { public static void main(String[] args) { File f = new File("d:\\LOLFolder\\LOL ...
分类：
其他好文 时间：
2020-11-01 10:10:37
阅读次数：
23
2020.10.27星期二 正式班D16 9.9 字符处理命令 9.9.1 sort排序 用于将文件内容加以排序 -n # 依照数值的大小排序 -r # 以相反的顺序来排序 -k # 以某列进行排序 -t # 指定分隔符，默认是空格 [root@ccc ~]# cat a.py b:3 c:2 a: ...
分类：
其他好文 时间：
2020-10-29 10:37:28
阅读次数：
18
