dataguard 日志传输服务（参数解析） 1> dg的三种模式1. 最大保护模式1）这种模式提供了最高级别的数据保护能力；2）要求至少一个物理备库收到重做日志后，主库的事务才能够提交；3）主库找不到合适的备库写入时，主库会自动关闭，防止未受保护的数据出现；4）优点：该模式可以保证备库没有数据丢失 ...
分类：
其他好文 时间：
2019-10-16 16:19:27
阅读次数：
137
我最近研究了hive的相关技术，有点心得，这里和大家分享下。 首先我们要知道hive到底是做什么的。下面这几段文字很好的描述了hive的特性： 1.hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapRedu ...
分类：
其他好文 时间：
2019-10-16 09:56:12
阅读次数：
101
看问题：beeline连接hiveserver2报错。连接串：hive --service beeline -u jdbc:hive2://s1:10000/hive 错误：Error: Could not open client transport with JDBC Uri: jdbc:hive ...
分类：
其他好文 时间：
2019-10-15 19:00:05
阅读次数：
97
完备的 AI 学习路线 https://mp.weixin.qq.com/s/fUNDdCzJrWBoKYh1tT4gSw CS229 课程讲义中文翻译： https://kivy cn.github.io/Stanford CS 229 CN/ /?id=%e8%b4%a1%e7%8c%ae%e6 ...
分类：
其他好文 时间：
2019-10-15 16:17:55
阅读次数：
148
1.列转行 select t.cust_id ,concat_ws(',',collect_list(group_id)) one_pace from (select 'A_001' cust_id ,'20191014' group_id union all select 'A_001' cust ...
分类：
其他好文 时间：
2019-10-15 16:15:24
阅读次数：
114
datax DataX 是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。 Github项目链接： "Github datax" 简介参考： "CNSD datax简介" ...
分类：
其他好文 时间：
2019-10-15 10:05:37
阅读次数：
86
一:使用:kettle:wind本地MySQL数据到hive的指定路径二:问题:没有root写权限网上说的什么少jar包,我这里不存在这种情况,因为我自己是导入jar包的:mysql-connector-java-5.1.22-bin.jar我是从wind本地MySQL导数据到hive的指定路径,会 ...
分类：
数据库 时间：
2019-10-15 09:24:39
阅读次数：
112
一:使用:kettle:wind本地MySQL数据到hive的指定路径二:问题:没有root写权限网上说的什么少jar包,我这里不存在这种情况,因为我自己是导入jar包的:mysql-connector-java-5.1.22-bin.jar我是从wind本地MySQL导数据到hive的指定路径,会 ...
分类：
数据库 时间：
2019-10-15 09:20:22
阅读次数：
115
笔者从 2008 年开始工作到现在也有 11 个年头了，一路走来都在和数据打交道，做过大数据底层框架内核的开发（Hadoop，Pig，Tez，Spark，Livy），也做过上层大数据应用开发（写 MapReduce Job 做 ETL ，用 Hive 做 Ad hocquery，用 Tableau ...
分类：
其他好文 时间：
2019-10-14 12:15:22
阅读次数：
95
通过Ambari2.7.3安装HDP3.1.0成功之后，通过spark sql去查询hive表的数据发现竟然无法查询 HDP3.0 集成了hive 3.0和 spark 2.3，然而spark却读取不了hive表的数据，准确来说是内表的数据。 原因hive 3.0之后默认开启ACID功能，而且新建的 ...
分类：
其他好文 时间：
2019-10-14 12:09:25
阅读次数：
144
