MapReduce既是一个编程模型，也是一个计算组件，处理的过程分为两个阶段，Map阶段：负责把任务分解为多个小任务，Reduce负责把多个小任务的处理结果进行汇总。其中Map阶段主要输入是一对Key-Value，经过map计算后输出一对Key-Value值；然后将相同Key合并，形成Key-Value集合；再将这个Key-Value集合转入Reduce阶段，经过计算输出最终Key-Value结果集。
分类：
其他好文 时间：
2020-11-26 14:53:23
阅读次数：
6
参考： https://www.cnblogs.com/itsuibi/p/10752868.html https://blog.csdn.net/zl834205311/article/details/81773511 xss攻击和csrf攻击的定义及区别 1.CSRF的基本概念、缩写、全称 CS ...
分类：
其他好文 时间：
2020-11-26 14:49:50
阅读次数：
5
上一篇中，我们提到了日志数据是如何进行解析了。然而，Serilog 灵活采用了不同的策略（Policy）决定一个日志对象如何解析到LogEventPropertyValue的子类对象中，即采用了IScalarConversionPolicy以及IDestructingPolicy接口对数据做转换。在 ...
分类：
其他好文 时间：
2020-11-26 14:27:51
阅读次数：
4
参数参数分为两种：可学习得到的参数，和超参数。机器学习可以归结为学习一个映射函数f:x→y，将输入变量x映射为输出变量y。一般我们可以假设映射函数为y=f(x,θ)。其中θ即为函数的参数。参数可以通过学习算法进行学习。除了可学习的参数之外，还有一类参数是用来定义模型结构或训练策略的，这类参数叫做超参数（Hyper-Parameter）。超参数和可学习的参数不同，通常是按照人的经验设定，或者通过网格
分类：
其他好文 时间：
2020-11-26 14:22:46
阅读次数：
6
前段面试总会考察这么个知识点，就是BFC，我自己也经常懵逼，这是个啥呀，完全不知道，但是呢，其实这就是个简写的概念，名字比较唬人而已，今天，我们就来深入研究下，揭开它的伪装。 bfc=> block formating context 块级格式化上下文 这个名字让你很迷惑，是不是，其实用通俗的语言来 ...
分类：
其他好文 时间：
2020-11-26 14:19:01
阅读次数：
2
1.redis基础 redis入门 数据类型 通用指令 jedis(针对java) 2.redis高级 Redis在linux中安装 持久化 事务 删除策略 redis.conf 配置 高级数据类型 3.redis集群 4.企业级解决方案 ...
分类：
其他好文 时间：
2020-11-26 14:06:55
阅读次数：
4
package com.atguigu.etl; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.NullWritable; impo ...
分类：
其他好文 时间：
2020-11-25 13:04:03
阅读次数：
26
之前和朋友联机打游戏，第二天正要听网易云发现提示网络异常，但是网络当时是可以用的。在网上找了很久的原因，突然想起来可能是打游戏开加速器用代理的原因。 win10下解决方案： 使用 win + i 打开window设置打开 网络和Internet 点击 代理 打开 自动监测设置 关闭 使用设置脚本 关 ...
分类：
其他好文 时间：
2020-11-25 13:02:40
阅读次数：
87
Java基础之：二维数组 声明方式： int[][] x = {{1},{1,2},{1,2,3}}; int[] x[] = new int[5][]; //通过类似这样的方式声明（new int[5][]），得到一个可动态生成的二维数组 int x[][] = new int[5][5]; // ...
分类：
编程语言 时间：
2020-11-25 12:57:18
阅读次数：
11
1.大数据架构图谱 文件系统 HDFS Hadoop Distributed File System，简称HDFS，是一个分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。 GlusterFS 是一个集群的文件系统 ...
分类：
其他好文 时间：
2020-11-25 12:06:50
阅读次数：
8
