1、安装模块； pip install xlrd # xlrd模块既可以处理2003版本之前的excel表格 xls，也可以处理新版本表格 xlsx； 但是 只能读取数； pip install openpyxl # openpyxl可以读，可以写，但是不支持老版本的excel文档； 2、表单处理 ...
分类：
其他好文 时间：
2020-03-12 23:30:28
阅读次数：
93
介绍 LEFT SEMI JOIN （左半连接）是 IN/EXISTS 子查询的一种更高效的实现。 示例 可以改写为 特点 1、left semi join 的限制是， JOIN 子句中右边的表只能在 ON 子句中设置过滤条件，在 WHERE 子句、SELECT 子句或其他地方过滤都不行。 2、le ...
分类：
其他好文 时间：
2020-03-12 17:09:46
阅读次数：
67
通过图表能更直观的体现数据的变化趋势。在图表中一个数据可体现在多个数据分类标签下，常见的生成的图表默认含有一种分类标签，如果需要设置多层分类标签则可以参考以下Java代码示例方法。使用工具：FreeSpire.XLSforJava（免费版）Jar获取及导入：通过官网下载jar包，并解压将lib文件夹下的Spire.Xls.jar文件导入java程序（推荐此方法）；或者通过Maven仓库下载导入。J
分类：
编程语言 时间：
2020-03-12 09:55:05
阅读次数：
103
点滴之水，汇成江海！ 这个小问题很容易解决，但真的也困扰了我很久！ 命令案例： sqoop create-hive-table --connect jdbc:mysql://192.168.44.143:3306/sqooptest --username root --password lam7 - ...
分类：
数据库 时间：
2020-03-11 19:46:01
阅读次数：
72
什么是Spark SQL？ Spark SQL是Spark用来处理结构化数据的一个模块，它提供了2个编程抽象：DataFrame和DataSet，并且作为分布式SQL查询引擎的作用。 我们已经学习了Hive，它是将Hive SQL转换成MapReduce然后提交到集群上执行，大大简化了编写MapRe ...
分类：
数据库 时间：
2020-03-11 10:46:14
阅读次数：
68
数据操作 加载数据 LOAD DATA 加载数据 LOCAL 本地数据，不加LOCAL就是分布式文件系统数据 OVERWRITE表示覆盖表中已有数据，否则表示追加 通过查询语言插入数据 这里使用了OVERWRITE关键字，之前分区内容会被覆盖掉。这是一次插入。 以下为多次插入，对多个分区目录插入数据 ...
分类：
其他好文 时间：
2020-03-10 12:11:23
阅读次数：
88
背景：1、ApacheSentry是Cloudera公司发布的一个Hadoop开源组件，它提供了细粒度级、基于角色的授权以及多租户的管理模式，2、Sentry当前可以和Hive/Hcatalog、ApacheSolr和ClouderaImpala集成，为这些组件提供权限管理服务。3、基于角色的管理（role-basedacesscontrol）通过创建角色，将每个组件的权限授予给此角色，然后在用户
分类：
其他好文 时间：
2020-03-09 19:38:28
阅读次数：
72
第 7 章 unittest 扩展 在第 6 章中，我们介绍了 unittest 的主要功能，但是如果只用它来写 Web 自动化测试，则仍稍显不足。例如，它不能生成 HTML 格式的报告、它不能提供参数化功能等。不过，我们可以借助第三方扩展来弥补这些不足。 7.1 HTML 测试报告 HTMLTes ...
分类：
Web程序 时间：
2020-03-09 13:53:59
阅读次数：
91
from：https://blog.csdn.net/zhanglh046/article/details/78505038 一 Spark SQL运行架构Spark SQL对SQL语句的处理和关系型数据库类似，即词法/语法解析、绑定、优化、执行。Spark SQL会先将SQL语句解析成一棵树，然后 ...
分类：
数据库 时间：
2020-03-08 16:00:50
阅读次数：
107
1. nvl nvl(value,default_value) 空字段赋值，若value为空，则赋值default_value；若value非空，则返回原本value值。 default_value可以是数值、'字符串'，也可以是字段 2. case...when...then...end case ...
分类：
其他好文 时间：
2020-03-07 13:08:46
阅读次数：
96
