数据预处理 在正式处理数据之前对收集的数据进行预先处理的操作。 原因:不管通过何种手段收集的数据 往往是不利于直接分析的 数据中存在的格式规整的差异。 目的:把不干净的数据 格式不规则的数据 通过预处理清洗变成格式统一规整的结构化数据 技术:MapReduce 预处理的编程思路问题 在使用mr编程的 ...
分类:
Web程序 时间:
2020-08-10 17:26:02
阅读次数:
80
##1.显示三个用户root、 mage、 wang的UID和默认shell 案例思路 **分析:**使用^和|匹配出三个用户,在用cut取列。 [root@localhost data]# cat /etc/passwd |grep -E "^(root|mage|wang)"|cut -d: - ...
分类:
其他好文 时间:
2020-08-05 18:12:39
阅读次数:
87
Oracle 19c Database Upgrade From 12.2.0.1 to 19.2.0.0 Using DBUA Description:- There are different ways of upgrading to the latest release of Oracle d ...
分类:
数据库 时间:
2020-07-30 10:43:05
阅读次数:
79
Combiner是MR程序中Mapper和Reducer之外的一种组件(本质是一个Reducer类) Combinr组件的父类就是Reducer Conbimer只有在驱动类里设置了之后,才会运行 Combiner和Reducer的区别在于运行的位置: map sort copy sort(shuf ...
分类:
其他好文 时间:
2020-07-30 01:32:34
阅读次数:
65
今天antd表格设置样式 ,被教育了一番,上来第一感觉这样式咋搞啊,一脸懵逼,还是css 掌握不牢固,今天记下css3复杂选择器。 1.相邻兄弟选择器 P+b : 同一个父元素下p标签后面的第一个兄弟元素b; 2.通用兄弟选择器 p~b : 同一个父元素下p标签后面的所有兄弟元素b; 3.属性选择器 ...
分类:
Web程序 时间:
2020-07-29 12:46:09
阅读次数:
187
Spark SQL(6) OptimizedPlan 在这一步spark sql主要应用一些规则,优化生成的Resolved Plan,这一步涉及到的有Optimizer。 之前介绍在sparksession实例化的是会实例化sessionState,进而确定QueryExecution、Analy ...
分类:
数据库 时间:
2020-07-26 19:28:25
阅读次数:
101
Find Minimum in Rotated Sorted Array II (H) 题目 Suppose an array sorted in ascending order is rotated at some pivot unknown to you beforehand. (i.e., [ ...
分类:
其他好文 时间:
2020-07-26 15:29:37
阅读次数:
58
In this note,you will not find the concept of QS and the method of how to compute the cost of time and space of this algorithm。This page will not refe ...
分类:
其他好文 时间:
2020-07-26 01:23:01
阅读次数:
76
ES5的数组方法: forEach() map() some() filter() every() reduce jQuery的方法的调用 对于选择器筛选的dom元素,比如$('.class')是一个伪数组jq对象,存放的dom元素,当执行addClass('active')方法,对于每个dom元素 ...
分类:
编程语言 时间:
2020-07-25 11:40:32
阅读次数:
139
Authelia 贴一下官方描述: Authelia is an open source authentication and authorization server protecting modern web applications by collaborating with reverse ...
分类:
其他好文 时间:
2020-07-24 16:13:19
阅读次数:
144