sqoop 导入 hive
hive.HiveImport: Exception in thread "main" java.lang.NoSuchMethodError: org.apache.thrift.EncodingUtils.setBit(BIZ)B
ERROR tool.ImportTool: Encountered IOException running import ...
分类:
编程语言 时间:
2014-09-08 03:15:26
阅读次数:
432
很久,在看电脑的时候,我把下面这两个词整混了, 以为他们是同一个词, 但是现在才看到他们的不同, 拼的不同,而且读音也完全不同啊,原来我一直都认为archive 是archive 以为是他的多意词, 始终一直觉得奇怪, 为什么用archive来表达这个意思, 以为这样才有成就感呢? 哈哈!achie...
分类:
其他好文 时间:
2014-09-07 19:48:15
阅读次数:
190
修改了hadoop/etc/hadoop/core-site.xml文件中的 fs.defaultFS hdfs://master:9000 属性值后,会导致原有的hive数据找不到,需要到hive的metastore数据库中更改SDS表中的LOCATION属性,将对应的hdfs参数值改成新的值.....
分类:
其他好文 时间:
2014-09-05 23:39:42
阅读次数:
228
通过设置hive.exec.parallel参数,使得在同一sql中的job可以并行的执行,因为在某些场景下,同一sql中,有时子查询之间并无关联。默认情况下为false可以在执行HQL之前,set该参数,hive.exec.parallel=具体某个数值。#####虽然可以保证并行运行,但是会耗费更多的资源。
分类:
其他好文 时间:
2014-09-05 16:27:52
阅读次数:
230
Strom 安装&部署本地执行:Storm Topology是可进行本地运行的, 必须在发布前进行本地测试, 以确保代码本身业务逻辑没有问题( Windows也可执行, 但是由于权限等原因, 执行时可能会报错, 但不影响执行结果).本地集群执行: Storm的本地集群搭建只能在UNIX架构的系统上执...
分类:
其他好文 时间:
2014-09-04 23:37:50
阅读次数:
217
安装前,查看“任务管理器”,如果存在java进程,将其关闭,并且关闭WAS相关服务。
在开始菜单中找到WAS更新向导启动项,如下图所示:
(1)、弹出安装界面后,点击“下一步”开始,到如下界面处,选择升级项目点(只能选择一项),点击“下一步”继续,如下图所示:
(2)、按照默认提示,点击下一步,稍后进入到如下界面,此处选择路径为补丁包所在的位置,如下图所示:
...
分类:
其他好文 时间:
2014-09-04 01:43:27
阅读次数:
246
说明:“指示轨迹”为“点选顺序”,截图为点击后效果截图
环境
项目点
指标
WAS版本
7.0
操作系统
Windows 2008
系统位数
64bit
内存
2G
WAS绝对路径
D:\IBM\WebSphere\AppSer...
分类:
其他好文 时间:
2014-09-04 00:12:17
阅读次数:
228
点击启动安装向导,如下图提示:
按步骤,逐步点击“下一步”进行安装,偶有几步需要注意,以下列举出这几步,建议如下设置:
(1)、样本不选择
(2)、修改路径,建议D:\Program\IBM\ WebSphere\AppServer路径,此处作者由于习惯使用以下路径,如图所示:
(3)、WebSphere Application Server环境选择“无...
分类:
其他好文 时间:
2014-09-04 00:12:07
阅读次数:
287
选择“安装IBM HTTPServer”选项,点击“安装向导”,如下图提示:
安装提示,逐步点击“下一步”,其中偶有几处细节注意即可,列举如下:
(1)、产品安装路径与先前WAS软件所安装路径统一,如下参考:
(2)、设置Windows服务定义,选择“以本地系统账户登录”,并设置相关密码,此文设置为admin,如下图:
(3)、HTTP Administrator ...
分类:
其他好文 时间:
2014-09-04 00:11:47
阅读次数:
184