1 开启 Map 输出阶段压缩(中间压缩) 开启 map 输出阶段压缩可以减少 job 中 map 和 Reduce task 间数据传输量。具体配置如下： 步骤1: 开启 Hive 中间传输数据压缩功能 map 任务和 reduce 任务之间的数据的压缩. hive.exec.compress.i ...
分类：
其他好文 时间：
2020-09-17 17:04:51
阅读次数：
30
JDK开发环境搭建及环境变量配置（win10）： https://blog.csdn.net/qq_37904780/article/details/81204326?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMa ...
一、需求分析 1、需求 手机号136、137、138、139开头都分别放到一个独立的4个文件中，其它开头的放到一个文件中 2、分析 a、分区 继承 Partitioner b、排序 实现 WritableComparable 二、具体代码（结合上篇博客） 1、自定义Haoop序列化类、排序 pack ...
分类：
编程语言 时间：
2020-09-17 16:58:35
阅读次数：
26
在Azure DevOps中，管道可以用来构建解决方案，O(∩_∩)O哈哈~快万能了，本章主要介绍如何创建Nuget包并且将其发布到Nuget服务器的过程。 前面我创建了一个非常简单的类库，这边我不做过多叙述，接下来我们需要进行编辑csproj文件，当我们创建Nuget包时，我们将使用dotnet ...
分类：
其他好文 时间：
2020-09-17 16:57:06
阅读次数：
30
生命周期面试题 1、什么是 vue 生命周期 vue 实例从创建到销毁的过程就是生命周期。 也就是从开始创建、初始化数据、编译模板、挂在 dom -> 渲染、更新 -> 渲染、卸载等一系列过程 2、vue生命周期的作用是什么 生命周期中有多个事件钩子，让我们在控制整个 vue 实例的过程时更容易形成 ...
分类：
其他好文 时间：
2020-09-17 14:16:53
阅读次数：
35
BUG的属性 重现环境： 操作系统 浏览器 其他（比如你是在现网还是测试环境、前置条件、账号等） 问题类型： BUG：测试过程中、维护过程发现影响系统运行的缺陷 NewFeature：对系统提出的新需求 Task：需要完成的一任务（开发或测试任务指派） Improvement：对现有系统功能的改进 ...
分类：
其他好文 时间：
2020-09-17 12:05:47
阅读次数：
27
title: Leetcode 621 之任务调度器 date: 2020-9-2 22:47:12 categories: LeetCode 这里参考popopop的解法，主要的是要记住下面这张图 流程： 先使用一个int[] 数组记录一下各个任务的出现次数； 然后遍历这个数组，找到出现次数最多的 ...
分类：
其他好文 时间：
2020-09-16 12:28:41
阅读次数：
34
概述 该篇基于AndroidQ，主要介绍系统启动中的 AMS(ActivityManagerService)的启动过程。 AMS对四大组件(AndroidQ将activity移到了ActivityTaskManagerService中，但也和AMS相关联)进行管理和调度。同时，AMS也对进程、电池、 ...
分类：
移动开发 时间：
2020-09-15 21:02:35
阅读次数：
49
文章目录 前言 网络爬虫 搜索引擎 爬虫应用 谨防违法 爬虫实战 网页分析 编写代码 运行效果 反爬技术 前言 很多人学习python，不知道从何学起。很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。很多已经做案例的人，却不知道如何去学习更加高深的知识。那么针对这三类人，我给大 ...
分类：
编程语言 时间：
2020-09-14 19:03:47
阅读次数：
48
''' from concurrent.futures import ThreadPoolExecutor,ProcessPoolExecutor import time,random,os def task(name,n): print('%s%s is running' %(name,os.ge ...
分类：
编程语言 时间：
2020-09-12 21:45:01
阅读次数：
36
