1.首先在hive中建表(尽量与mysql字段对应) 2. 将mysql中的表导出 txt格式 3.通过hadoop 上传到HDFS上 命令 hadoop dfs -put /home/hadoop/dim_station_trans_com_info.txt /user/hive/external ...
分类:
数据库 时间:
2020-04-24 18:41:58
阅读次数:
109
Androidapi.JNI.Support引用这个单元 procedure _InstallApk(Apk: string); var LFile: JFile; LIntent: JIntent; begin LFile := TJFile.JavaClass.init(StringToJStr ...
分类:
移动开发 时间:
2020-04-24 16:01:34
阅读次数:
145
Hive排序 一、全局排序(order by) Order by:全局排序,只有一个reducer 1、使用 Order by 子句排序 升序:ASC,可以不写,默认是升序 降序:DESC,降序 2、order by 语句使用在select语句的结尾 3、案例实操 -- (1) 查询员工信息按工资升 ...
分类:
编程语言 时间:
2020-04-24 14:38:20
阅读次数:
75
原文:手把手教你如何构建 WPF 官方开源框架源代码 从去年微软就将 WPF 开源了,差不多现在所有 WPF 的源代码都开源了。在学习框架的时候,我会做一些改动,期望能构建一个自己的版本进行测试。但是作为一个特别大的框架,想要构建跑起来可不是直接在 VisualStudio 里面点击一下运行就完成了... ...
背景在Spark 1.* 版本中不支持Hive Perment Function的加载,使用起来不是很方便;在Spark 2.* 版本中通过HiveExternalCatalog 中的HiveClient 来直接和hive metaStore交互,轻松实现Hive Perment Function的 ...
分类:
其他好文 时间:
2020-04-23 15:06:34
阅读次数:
64
出现错误 For direct MetaStore DB connections , we don't suport reries at the client level. 修改字符集为 latin1 解决 alter database hve character set latin1 ...
分类:
其他好文 时间:
2020-04-23 11:47:03
阅读次数:
49
mac上搭建mysql环境配置 1、下载mysql for mac: https://downloads.mysql.com/archives/community/ 注意:mysql版本要和你的MAC版本保持一致 2、一路傻瓜式点击下一步 此处选择“Use Legacy Password Encry ...
分类:
数据库 时间:
2020-04-22 19:56:29
阅读次数:
88
原文:https://www.jianshu.com/p/4e72b22edf49 1、数据仓库与数据库 数据仓库是数据库概念的升级,和数据库相比,数据仓库要比数据库更加庞大; 数据仓库主要用于分析数据,数据库主要用于捕获数据; 数据仓库主要存储历史数据,数据库存储在线交易数据; 数据仓库的基本元素 ...
分类:
其他好文 时间:
2020-04-21 18:09:21
阅读次数:
49
hyperbase和hbase一样,底层数据结构的存储依托于hdfs;今天我们对星环的大数据平台组件hyperbase在hdfs上的存储做一下简单的介绍; TDH: 4.x系列 TDH4.9.2之后开始使用的版本是对应开源的1.3.1,之前版本对应的开源的0.98.6 5.x系列 TDH5.2.3之 ...
分类:
其他好文 时间:
2020-04-21 11:23:59
阅读次数:
139
1. ranger-hdfs plugin安装 1.1 安装ranger hdfs plugin软件包 # pwd /opt/app/ranger-release-ranger-1.2.0/target # tar -zxvf ranger-1.2.0-hdfs-plugin.tar.gz 1.2 ...
分类:
其他好文 时间:
2020-04-20 16:24:01
阅读次数:
169