1、列裁剪select a,b from t where e < 10;设置参数:hive.optimize.cp = true2、分区裁剪select * from (select c1,count(1) from t group by c1) subqwhere subq.prtn = 100;...
分类:
其他好文 时间:
2014-07-28 15:04:23
阅读次数:
199
1.读数据 excel文件 1.library(RODBC);z<-odbcConnectExcel("weather.xls");(w<-sqlFetch(z,"Sheet1"));odbcClose(z); 选择文件: data=odbcConnectExcel(file.choose());显...
分类:
其他好文 时间:
2014-07-26 14:16:35
阅读次数:
208
今天公司网站要添加一个手机app,我直接把apk文件传到了网站根目录下,并且在页面中添加了路径<areashape="rect"coords="533,290,672,328"href="<c:urlvalue=‘/wswhly.apk‘/>"/>可是在网站中点击,怎么也下载不了,可是换成别的文件类型(xls、flv等等)就可以下载..
分类:
Web程序 时间:
2014-07-26 03:17:37
阅读次数:
412
Spark SQL Catalyst的核心类库TreeNode详解,配有实例,图文并茂。...
分类:
数据库 时间:
2014-07-24 23:37:23
阅读次数:
895
Hive 命令行
Hive 命令行示例
?从命令行执行指定的sql语句
?$HIVE_HOME/bin/hive -e 'select a.col from tab1 a'
?以指定的hive环境变量执行指定的sql语句
?$HIVE_HOME/bin/hive -e 'select a.col from tab1 a' -hiveconf hive.exec.scr...
分类:
其他好文 时间:
2014-07-24 23:11:14
阅读次数:
256
尝试过很多Excel导入导出方法,都不太理想,无意中逛到oschina时,发现了NPOI,无需Office COM组件且不依赖Office,顿时惊为天人,怀着无比激动的心情写下此文。曾使用过的方法直接导出html,修改后缀名为.xls,这个方法有点像骗人的把戏,而且不能再导入使用Jet OLEDB引...
分类:
其他好文 时间:
2014-07-24 22:39:13
阅读次数:
375
$filename = 'hehe.xls'; header ('Content-type: text/html; charset=UTF-8');header ( "Content-type:application/vnd.ms-excel; charset=UTF-8");header ( "C...
分类:
Web程序 时间:
2014-07-24 21:21:23
阅读次数:
161
问: ????今天花一天时间给centos6.3 64bit的系统搭建了hadoop,顺便把hive和mysql也装上了,测试什么的都没问题。 但是,迷茫了,我怎么用它分析网站的日志。他的工作原理迷迷糊糊的, 而且我这个hadoop用的...
分类:
其他好文 时间:
2014-07-23 21:35:46
阅读次数:
332
1.配置环境
1.引入jar包:hive-exec-0.8.0.jar 和 hadoop-core-0.20.2.jar
2.编写udf函数
1.extends UDF
2.重新定义UDF的evaluate函数。
package com.qunar.hiveudf;
import java.text.SimpleDateFormat;
import java.util.Calen...
分类:
其他好文 时间:
2014-07-23 20:58:47
阅读次数:
217
hive是什么? 白话一点再加不严格一点,hive可以认为是map-reduce的一个包装。hive的意义就是把好写的hive的sql转换为复杂难写的map-reduce程序。 于是,hbase是什么? 同样白话一点加不严格一点,hbase可以认为是...
分类:
其他好文 时间:
2014-07-23 13:57:36
阅读次数:
268