hive中删除表的错误Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:javax.jdo.JDODataStoreException: Iteration request failed :...
分类:
其他好文 时间:
2014-09-10 00:28:59
阅读次数:
748
知识点:1、Hive的窗口和分析函数进阶 CUME_DIST 小于等于当前行值的行数 / 总行数 PERCENT_RANK 当前rank值-1 / 总行数-1 NTILE 将窗口分成n片 LEAD(col, n, default) 窗口内下n行值 LAG(col, n , default)...
分类:
其他好文 时间:
2014-09-09 17:43:09
阅读次数:
370
启动HiveServer2:cd $HIVE_HOME/bin以后台方式默认端口启动HiveServer2(默认端口是10000):hiveserver2 &以后台方式指定端口的方式启动:hiveserver2 --hiveconf hive.server2.thrift.port=14000 &使...
分类:
数据库 时间:
2014-09-09 15:28:58
阅读次数:
1080
知识点:1、Hive复合数据类型map与Lateral View的使用; map、str_to_map、map_keys、map_values,map与lateral view2、通过translate进行简单数据保护; Hive转换函数进行数据保护,确保企业应用信息安全3、Hive的窗口和分析.....
分类:
其他好文 时间:
2014-09-09 15:27:09
阅读次数:
1106
(1)、主机解析地址修改
WAS节点1、WAS节点2、数据库服务器下修改hosts文件
将所有主机的IP映射到各个hosts文件中,举例方法如下:
例:WAS节点WINDOWS环境下
WINDOWS修改:C:\Windows\System32\drivers\etc\hosts
LINUX修改:
[root@hyldbsoft]# vi /etc/hosts
# Do n...
分类:
其他好文 时间:
2014-09-09 13:20:18
阅读次数:
198
(1)、确认两节点时间同步
要保证节点间的时间误差控制在5分钟之内,否则将不会完成节点的添加
(2)、节点1执行添加节点指令
主机名输入为:DM主机名称
节点1:(到AppSrv01路径下)
指令为:addNodeWIN-PLDC49NNSAA 8879
(3)、节点2执行添加节点指令
主机名输入为:DM服务器主机名
节点2(到AppSrv01路径下)
指...
分类:
其他好文 时间:
2014-09-09 13:19:28
阅读次数:
349
输入DM管理服务器IP登陆WAS控制台(http://10.53.105.63:9060/ibm/console/),如下所示:
(1)、查看节点同步状态
(2)、启动HTTP服务
节点1(DM服务器):
分别点击图例中选项,启动HTTP管理服务、节点1上的HTTP服务,如下图:
节点2,同理,启动HTTP服务。
(3)、新建Web服务器
...
分类:
其他好文 时间:
2014-09-09 13:18:28
阅读次数:
233
(1)、安装实验包
以上选择“确定”后,进入如下界面:
继续点击“下一步”,如下图:
注意下面这一步是重点,需要选中集群和服务器、模块复选框后点击应用,选择如下图:
按以上步骤操作完成后,配置界面变为如下,则表示配置成功,如下图:
最后一步,点击“完成”即可,如下图:
点击如下“...
分类:
其他好文 时间:
2014-09-09 13:16:58
阅读次数:
180
为更好的理解was集群工作机制,让我们在一个节点上将测试程序多刷新几次,来关注一下几个参数:“Local address”、“Local port”,如下图:
第一次:
第二次:
第三次:
第四次:
将以上结果做一个归纳,会发现规律一目了然,如下图:
刷新次数
Local address
Local p...
分类:
其他好文 时间:
2014-09-09 13:16:28
阅读次数:
256
spark1.1相较于spark1.0,最大的差别就在于spark1.1增加了万人期待的CLI和ThriftServer。使得hive用户还有用惯了命令行的RDBMS数据库管理员很容易地上手sparkSQL,在真正意义上进入了SQL时代。下面先简单介绍其使用,限于时间关系,以后再附上源码分析。
1:ThriftServer和CLI的命令参数
A:令人惊讶的CLI...
分类:
数据库 时间:
2014-09-09 12:39:38
阅读次数:
387