随手记一些Hive容易遗漏的点或者问题,之后可能还会继续更新。 1、Hive使用一个inputFormat对象将输入流分割成记录,然后使用一个outputFormat对象来将对象格式化为输出流,再使用一个SerDe在读数据时将记录解析成列,在写数据时将列编码成记录。 2、where条件对分区字段使用 ...
分类:
其他好文 时间:
2019-11-10 17:14:55
阅读次数:
86
本博客主要介绍Hive和MySql的搭建: 学习视频一天就讲完了,我看完了自己搭建MySql遇到了一堆坑,然后花了快两天才解决完,终于把MySql搭建好了。然后又去搭建Hive,又遇到了很多坑,就这样一直解决问题,加上网上搜索和个人排查检查日志。搜索百度,百度不行搜索Bing,看了csdn,看str ...
分类:
其他好文 时间:
2019-11-10 13:30:15
阅读次数:
84
问题原因是Hive里面配置的相对路径没有找到,我们可以直接在文件里面修改为绝对路径。 1.在hive下面窗口temp文件夹 cd /opt/hive mkdir temp cd temp 2.查看temp所在路径 pwd temp 3.进入hive-site.xml里面 vim /opt/hive/ ...
分类:
编程语言 时间:
2019-11-09 00:31:05
阅读次数:
99
1、首先是jdk的路径问题 为了和以后出现的hadoop,spark出现 路径带有空格导致 调用失败的情况, 直接把 jdk的路径 剪切到 没有空格的目录下。 D:\>echo %JAVA_HOME% C:\Java\jdk1.8.0_202 到这里,在cmd下,能 看到 scala -versio ...
里氏替换原则 开放封闭原则(Open Closed Principle)是构建可维护性和可重用性代码的基础。它强调设计良好的代码可以不通过修改而扩展,新的功能通过添加新的代码来实现,而不需要更改已有的可工作的代码。抽象(Abstraction)和多态(Polymorphism)是实现这一原则的主要机 ...
分类:
其他好文 时间:
2019-11-08 21:11:09
阅读次数:
95
select regexp_replace(regexp_replace(regexp_replace(t.column_001,'\0',''),'\012',''),'\015' ,'') as column_001 ,regexp_replace(regexp_replace(regexp_r ...
分类:
其他好文 时间:
2019-11-07 14:46:20
阅读次数:
192
系统内置函数 1. 查看系统自带的函数 hive> show functions; 2. 显示自带的函数的用法 hive> desc function upper; 3. 详细显示自带的函数的用法 hive> desc function extended upper; 自定义函数 占位符! ...
分类:
其他好文 时间:
2019-11-07 13:11:24
阅读次数:
82
怎么把app(apk和ipa文件)安装包放在服务器上供用户下载? IIS服务器网站不能下载.apk文件的原因:IIS的默认MIME类型中没有.apk文件,所以无法下载。解决办法:给.apk格式文件添加一个MIME类型。 IIS服务器端的解决方法:1、打开IIS服务管理器,找到服务器,右键-属性,打开 ...
分类:
移动开发 时间:
2019-11-07 09:44:55
阅读次数:
105
错误一: Exception in thread "main" java.lang.NoClassDefFoundError: jline/console/completer/ArgumentCompleter$ArgumentDelimiter at java.lang.Class.forName ...
分类:
其他好文 时间:
2019-11-06 12:55:27
阅读次数:
109
参考博文:https://blog.csdn.net/lsxy117/article/details/47703155 大部分问题还是hadoop的配置文件的问题: 修改配置文件hadoop/conf/ hadoop-env.sh,将HADOOP_CLASSPATH原来的值改为如下,重启hadoop ...
分类:
其他好文 时间:
2019-11-06 12:52:23
阅读次数:
81