本文来自：http://www.kngstr.com 简介： 一直以来，Inno的作者都没有提供打包隐藏文件和系统文件的功能。 但是，如果我们做批量打包，批量封装的时候，总会需要这样的功能，因为我们不能保证没有隐藏文件。 如果有这些文件，但是没有被打包进去，相信后果大家都懂的。 这次我用ISPP功能 ...
分类：
其他好文 时间：
2019-01-18 21:52:18
阅读次数：
290
1.工作流调度器的介绍（1）为什么要使用工作流调度器？??-一个完整的数据分析系统通常都是由大量任务单元组成：shell脚本程序，java程序，mapreduce程序、hive脚本等??-各任务单元之间存在时间先后及前后依赖关系??-为了很好地组织起这样的复杂执行计划，需要一个工作流调度系统来调度执行（2）常见工作流调度器?&e
分类：
其他好文 时间：
2019-01-17 23:55:27
阅读次数：
347
inner join 只打印能匹配上的数据，没有匹配上的不输出 left join 只打印能匹配上的数据，没有匹配上的不输出 right join full outer join left outer join left semi join 相当于 select * from a where a.i ...
分类：
其他好文 时间：
2019-01-17 23:53:59
阅读次数：
206
1新建一个数据库 2创建一个外部表 3添加数据 vi student.txt 4 查询 5 group by分组 6 cluster by 分区，排序 7 ...
分类：
数据库 时间：
2019-01-17 19:40:40
阅读次数：
225
1.sqoop的介绍（1）介绍： Sqoop是Apache旗下的一款“hadoop和关系型数据库服务器之间传送数据”的工具。 导入数据：MySQL、Oracle导入数据到hadoop的hdfs、hive、HBASE等数据存储系统。 导出数据：从hadoop的文件系统中导出数据到关系型数据库中。（2）工作机制 将
分类：
其他好文 时间：
2019-01-17 16:27:23
阅读次数：
181
今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况，搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令，该死的oozie的日志和异常提示功能太辣鸡了，最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导 ...
分类：
数据库 时间：
2019-01-16 19:17:59
阅读次数：
597
一、导入导出数据库常用命令语句 1)列出mysql数据库中的所有数据库命令 # sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password 123456 2)连接mysql并列出数据库中 ...
分类：
数据库 时间：
2019-01-16 19:10:41
阅读次数：
186
列转行 测试数据 hive> select * from col_lie limit 10; OK col_lie.user_id col_lie.order_id 104399 1715131 104399 2105395 104399 1758844 104399 981085 104399 2 ...
分类：
其他好文 时间：
2019-01-16 14:25:59
阅读次数：
268
Non-fragile instance variables are a headline feature of the modern Objective-C runtime available on iPhone and 64-bit Mac. They provide framework dev ...
分类：
其他好文 时间：
2019-01-16 13:18:30
阅读次数：
145
1 建表 2 创建一个student.txt 添加数据 3 上传 hdfs dfs -put student.txt /user/hive/warehouse/student 4 select * from student; 5 通常不会通过put方式加载数据，而是通过load的方式添加数据 loa ...
分类：
其他好文 时间：
2019-01-15 22:03:19
阅读次数：
225
