码迷,mamicode.com
首页 >  
搜索关键字:hive    ( 5904个结果
【转】Hive的insert操作
insert 语法格式为:1. 基本的插入语法:insert overwrite table tablename [partition(partcol1=val1,partclo2=val2)] select_statement;insert into table tablename [partit...
分类:其他好文   时间:2015-07-14 17:00:12    阅读次数:123
从预装版VM快速入门hadoop
利用预装VM,有以下两种形式TheCloudera QuickStart Virtual Machine. This image runs within the free VMWare player,VirtualBox, or KVM and has Hadoop, Hive, Pig and e...
分类:其他好文   时间:2015-07-14 15:13:44    阅读次数:255
Hive数据类型与文件存储格式
Hive数据类型基础数据类型:TINYINT,SMALLINT,INT,BIGINT,BOOLEAN,FLOAT,DOUBLE,STRING,BINARY,TIMESTAMP,DECIMAL,CHAR,VARCHAR,DATE。复杂数据类型:包括ARRAY,MAP,STRUCT,UNION,这些复杂类型是由基础类型组成的。ARRAY:ARRAY类型是由一系列相同数据类型元素组成的,这些元素可以通过下...
分类:其他好文   时间:2015-07-14 11:28:35    阅读次数:146
Hive中使用Python实现Transform时遇到Broken pipe错误排查
Hive中有一表,列分隔符为冒号(:),有一列utime是Timestamp格式,需要转成Weekday存到新表。利用Python写一个Pipeline的Transform,weekday.py的代码也很简单:import sysimport datetimefor line in sys.stdi...
分类:编程语言   时间:2015-07-13 20:07:11    阅读次数:485
离线抓取域登录缓存hash(mscash)
注意:这次抓取的是域成员的hash并不是域控的hash注册表导出:regsavehklm\samc:\sam.hive&regsavehklm\systemc:\system.hive&regsavehklm\securityc:\security.hivemscash(域缓存hash)提取cain能从hive文件中提取mscash,但是不支持复制出来,只能一个一个字符敲出来,..
分类:其他好文   时间:2015-07-13 18:54:50    阅读次数:336
Hive简述及几种访问方式
what is hive? Hive 是建立在Hadoop上的数据仓库基础构架。它提供了一系列的工具,可以用来进行数据的提取转化加载(ETL ),这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。Hive 定义了简单的类SQL查询语言,称为 HQL,它允许熟悉SQL的用户查询数据。同时,这个语言也允许熟悉 MapReduce 开发者的开发自定义的 mapper 和 redu...
分类:其他好文   时间:2015-07-13 18:44:28    阅读次数:287
写一个shell脚本利用wget抓取股票历史数据
今天,大数据部老大交给我一项任务——抓取股票历史数据。于是乎,我自行在网上找了一下,发现wget真真是一个非常强大的linux下载工具。我已经被深深震撼到了。下面叙述今天的一些过程,还是比较坎坷的。 首先,我利用公司现在存在的股票数据,使用hive查询所有的股票代码并导入本地:hive -e ...
分类:系统相关   时间:2015-07-13 18:27:38    阅读次数:190
hive1.2.1问题集锦
1.启动hive报错: Logging initialized using configuration in jar:file:/usr/local/hive-1.2.1/lib/hive-common-1.2.1.jar!/hive-log4j.properties[ERROR] Termina....
分类:其他好文   时间:2015-07-13 10:11:21    阅读次数:134
启动hive报错[ERROR] Terminal initialization failed; falling back to unsupported
启动hive时报如下的错误[ERROR] Terminal initialization failed; falling back to unsupported 解决办法:进入到hadoop安装目录下的share/hadoop/yarn下删除 jline的jar文件。再启动hive即可...
分类:其他好文   时间:2015-07-12 23:28:20    阅读次数:297
linux 管道
linux的管道:前一个命令的输出当做后一个命令的输入管道的形式:命令1 |命令2|命令3|....eg:echo"redhat"|passwd --stdin hive cat /etc/passwd|sort cut -d: -f1 /etc/passwd|sort
分类:系统相关   时间:2015-07-12 21:33:01    阅读次数:135
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!