首先虚拟机上已经安装好hive。 下面是连接hive需要的操作。 一、配置。 1.查找虚拟机的ip 输入 ifconfig 2.配置文件 (1)配置hadoop目录下的core-site.xml和hdfs-site.xml 在core-site.xml中添加下面配置: <property> <nam ...
分类:
数据库 时间:
2019-11-16 14:55:09
阅读次数:
118
最近一段时间,处理过一个问题,那就是hive jdbc的连接问题,其实也不是大问题,就是url写的不对,导致无法连接。问题在于HiveServer2增加了别的安全验证,导致正常的情况下,传递的参数无法使用,hive连接返回用户为空的错误,具体错误不再详谈,今天就说说jdbc的url书写问题。 正常情 ...
分类:
数据库 时间:
2019-07-27 19:48:05
阅读次数:
309
Hive系列博文,持续更新~~~ 大数据系列之数据仓库Hive原理 大数据系列之数据仓库Hive安装 大数据系列之数据仓库Hive中分区Partition如何使用 大数据系列之数据仓库Hive命令使用及JDBC连接 Hive的工作原理简单来说就是一个查询引擎 先来一张Hive的架构图: Hive的工 ...
分类:
其他好文 时间:
2017-04-09 17:18:33
阅读次数:
267
Java使用jdbc连接Hive比较简单,但是Hive的计算能力相对于其它数据库的SQL而言较弱,要完成非常规的计算需要将数据取出后用Java进一步计算,编程比较麻烦。使用集算器配合Java编程,可以减少Java使用Hive时要进行复杂计算工作量。下面我们通过例子来看一下具体作法:Hive中的or....
分类:
编程语言 时间:
2016-01-15 08:39:52
阅读次数:
141
hive是大数据技术簇中进行数据仓库应用的基础组件,是其它类似数据仓库应用的对比基准。基础的数据操作我们可以通过脚本方式以hive-client进行处理。若需要开发应用程序,则需要使用hive的jdbc驱动进行连接。本文以hivewiki上示例为基础,详细讲解了如何使用jdbc连接hive数据库..
分类:
数据库 时间:
2015-09-15 20:18:25
阅读次数:
633
public class TestHive {
private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";
public static void main(String[] args) throws SQLException {
try {
Class.forName(driverNam...
分类:
数据库 时间:
2015-04-27 10:07:08
阅读次数:
156
这几天和同事一起分析的一个线上的java应用。线上查询平台应用,主要原理是用户传入sql,经由查询平台通过jdbc连接hive做查询操作。主要架构:user---->tengine---->java--->haproxy---->hiveserver2线上用户反映查询异常,分析tengine的访问日志,发现部分响应的h..
分类:
编程语言 时间:
2014-09-03 02:40:06
阅读次数:
317
在hive上启动servicehive--servicehiveserver在eclipse中进行开发导入需要的jar包(我这个导入的是udf和jdbc连接hive需要的jar包,基本是最简的了)我的代码,hive的语法就不说了,大家可以修改例子中的sql来进行自己的业务。我的hive没有设置用户名,密码。所以Connectioncon=..
分类:
数据库 时间:
2014-07-08 11:20:04
阅读次数:
411