1.获取 不管是什么格式，一旦锁定了某种数据，那么了解该数据中有什么以及没有什么，就变得非常重要了。 import urllib.request 2.检查和探索 主要的目标是合理 地检查数据，而实现这一点的最好办法是发现不可能或几乎不可能的事情。举个例子， 如果数据具有唯一的标识符，检查是否真的只有 ...
分类：
其他好文 时间：
2020-02-25 20:34:44
阅读次数：
60
下载路径 Hadoop所有版本：http://archive.apache.org/dist/hadoop/common/ ...
分类：
其他好文 时间：
2020-02-24 16:55:48
阅读次数：
51
拒绝花里胡哨的安装，直接输入下方语句即可 root@xxx~# apt-get install build-essential 安装过程中的问题 E: Unable to fetch some archives, maybe run apt-get update or try with --fix- ...
分类：
系统相关 时间：
2020-02-24 10:02:17
阅读次数：
85
https://www.cnblogs.com/raymoc/p/5323824.html 大表对小表应该使用MapJoin ,set hive.auto.convert.join=true;让hive自动识别，把join变成合适的Map Join 大表对大表 set hive.auto.conve ...
分类：
其他好文 时间：
2020-02-23 20:24:57
阅读次数：
64
1、MapJoin 如果不指定 MapJoin 或者不符合 MapJoin 的条件，那么 Hive 解析器会将 Join 操作转换成 Common Join，即：在 Reduce 阶段完成 join。容易发生数据倾斜。可以用 MapJoin 把小表全部加载到内存在 map 端进行 join，避免 r ...
分类：
其他好文 时间：
2020-02-22 21:29:41
阅读次数：
63
https://www.wmathor.com/index.php/archives/1124/ 首部 mac地址是会变化的 https://www.zhihu.com/question/21546408 https://cloud.tencent.com/developer/article/117 ...
分类：
系统相关 时间：
2020-02-20 17:11:03
阅读次数：
73
一、IIS的安装直接略过 二、主要记录PHP、MYSQL环境的搭建 1、本次环境搭建使用的环境版本号对应如下： 1、PHP：PHP 7.2 (7.2.28) 下载地址：https://windows.php.net/downloads/releases/php-7.2.28-nts-Win32-VC ...
分类：
数据库 时间：
2020-02-19 11:36:21
阅读次数：
66
Sqoop 简介 Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可 ...
分类：
Web程序 时间：
2020-02-18 12:47:15
阅读次数：
149
原文:[WPF 自定义控件]创建包含CheckBox的ListBoxItem 1. 前言# Xceed wpftoolkit提供了一个CheckListBox，效果如下： 不过它用起来不怎么样，与其这样还不如参考UWP的ListView实现，而且动画效果也很好看： 它的样式如下： Copy 属性是很... ...
- ``` python @app.route('/test/', methods=['GET', 'POST'], endpoint='test01') def test(): getData = request.args # 利用request对象获取GET请求数据 print('获取的GET数... ...
分类：
其他好文 时间：
2020-02-17 21:26:39
阅读次数：
100
