hive 中使用lzo 1 启动hive 错误Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hive/conf/HiveConf at java.lang.Class.forName0(Na....
分类:
其他好文 时间:
2014-09-01 17:27:43
阅读次数:
545
今天手动kill掉hive thrive进程,jps出现了“-- process information unavailable”,很怪异。。。问题解决:进入tmp目录, 删除该目录下名称为hsperfdata_{username}的文件夹然后jps,世界清静了。
分类:
其他好文 时间:
2014-09-01 13:50:13
阅读次数:
223
一个Hive查询生成多个map reduce job,一个map reduce job又有map,reduce,spill,shuffle,sort等多个阶段,所以针对hive查询的优化可以大致分为针对MR中单个步骤的优化(其中又会有细分),针对MR全局的优化,...
分类:
数据库 时间:
2014-08-31 03:58:10
阅读次数:
496
import sysimport datetimefor line in sys.stdin: line = line.strip() userid, movieid, rating, unixtime = line.split('\t') weekday = datetime.datetim...
分类:
其他好文 时间:
2014-08-31 00:17:50
阅读次数:
1780
http://blog.fens.me/linux-redis-install/在Ubuntu中安装RedisR利剑NoSQL系列文章,主要介绍通过R语言连接使用nosql数据库。涉及的NoSQL产品,包括Redis,MongoDB,HBase,Hive,Cassandra,Neo4j。希望通过我的...
分类:
其他好文 时间:
2014-08-30 17:43:49
阅读次数:
328
一、安装jdk配java环境rpm-ivhjdk.rpm打开/etc/profile增加:JAVA_HOME=/usr/java/jdk1.7.0_60
CLASSPATH=.:$JAVA_HOME/lib.tools.jar
PATH=$JAVA_HOME/bin:$PATH
exportJAVA_HOMECLASSPATHPATH二、安装mysqlyuminstallmysql-servermysql
#初始化
mysql_install_db
#运行produc..
分类:
其他好文 时间:
2014-08-29 18:31:38
阅读次数:
315
强类型语言在创建对象时总会显式或隐式地包含对象的类型信息。也就是说,强类型语言在分配对象内存空间时,总会关联上对象的类型。相比之下,弱类型 语言则不会这样做。在分配了内存空间之后,有两种方法释放空间...
分类:
其他好文 时间:
2014-08-29 16:26:48
阅读次数:
180
select min(call_log), a.mail_subject from (select mail_to,mail_subject from dw_user_deviler_201408 where log_date>=20140825 and mail_subject not ...
分类:
其他好文 时间:
2014-08-29 15:54:38
阅读次数:
177