1、需要哪些安装包 VMware Workstation 15 Pro CentOS-7-x86_64-DVD-1810 hadoop-2.7.3 apache-hive-3.1.1 jdk-8u181-linux-x64 Xshell-6.0.0175 Xftp-6.0.0169 2、VMware ...
分类:
系统相关 时间:
2019-10-26 17:06:41
阅读次数:
143
签发token 校验token 案例:实现多方式登陆签发token 案例:自定义认证反爬规则的认证类 admin使用自定义User表:新增用户密码密文 群查接口各种筛选组件数据准备 drf搜索过滤组件 drf排序过滤组件 drf基础分页组件 ...
分类:
编程语言 时间:
2019-10-24 21:35:55
阅读次数:
118
Hive和HBase的区别 ? hive是为了简化编写MapReduce程序而生的,使用MapReduce做过数据分析的人都知道,很多分析程序除业务逻辑不同外,程序流程基本一样。在这种情况下,就需要hive这样的用戶编程接口。Hive本身不存储和计算数据,它完全依赖于HDFS和MapReduce,H ...
分类:
数据库 时间:
2019-10-24 12:01:06
阅读次数:
71
测试结果: 原文:https://www.cnblogs.com/s0611163/archive/2019/08/23/11399898.html ...
hive常用交互命令 “-e” 不进入hive的交互窗口执行sql语句。 eg: bin/hive -e "show tables;" “-f” 执行脚本中sql语句 eg: bin/hive -f "/home/user/hive/tmp/hivef.sql"; "!quit" 退出hive交互窗... ...
分类:
其他好文 时间:
2019-10-22 14:48:14
阅读次数:
157
数据层的存储一般如下: Data Source 数据源一般是业务库和埋点,当然也会有第三方购买数据等多种数据来源方式。业务库的存储一般是Mysql 和 PostgreSql。 ODS 层 ODS 的数据量一般非常大,所以大多数公司会选择存在HDFS上,即Hive或者Hbase,Hive居多。 可将O ...
分类:
其他好文 时间:
2019-10-22 13:07:13
阅读次数:
124
源码分析 dispath方法内 self.initial(request, *args, **kwargs) 进入三大认证 认证组件 权限组件 权限六表分析 models.py t_model.py 自定义认证类 settings.py authentications.py 系统权限类 urls.p ...
分类:
其他好文 时间:
2019-10-22 01:07:38
阅读次数:
143
源码分析 自定义认证类 系统权限类 自定义权限类 ...
分类:
其他好文 时间:
2019-10-21 20:44:05
阅读次数:
273
Hive脚本中切勿使用/**/注释 Hive脚本的注释目前好像只有 -- ,我之前在做初版数据的时候 使用NotePad++ 习惯性的有时候注释会写成 /**/ ,然后就引发了问题 脚本上传到hue,加入调度,调度正常执行 不报错,但是应该有的数据却为空!!! 奇了怪了.... (反复执行了好多遍, ...
分类:
其他好文 时间:
2019-10-20 10:51:35
阅读次数:
148
Hive学习之路 (一)Hive初识 https://www.cnblogs.com/qingyunzong/p/8707885.html 讨论QQ:1586558083 目录 Hive 简介 什么是Hive 为什么使用 Hive Hive 特点 Hive 和 RDBMS 的对比 Hive的架构 1 ...
分类:
其他好文 时间:
2019-10-20 10:46:35
阅读次数:
102