#原始示例数据#1,k1|k2|k3|k1#2,k1|k1|k5|k3|k6#3,k3|k6|k7|k8#建表语句CREATE TABLE IF NOT EXISTS words(id INT,kw STRING)ROW FORMAT delimitedFIELDS TERMINATED BY ', ...
分类:
数据库 时间:
2019-05-09 10:56:16
阅读次数:
146
一、定义agent,并运行1、配置文件#计划##收集hive的日志,存到hdfs/opt/cdh-5.3.6/hive-0.13.1-cdh5.3.6/logs/hive.log命令:tail -f source:Exec source 在启动时运行一个给定的Unix命令,并期望该进程在标准输出上不... ...
分类:
其他好文 时间:
2019-05-08 14:44:10
阅读次数:
214
1.sqoop的概述a.sqoop 是一款工具,是appche 旗下的一款工具,主要是负责 hadoop与RDBMS之间的数据迁移,即从hadoop 文件系统 导出数据到RDBMS,从RDBMS导入数据到hadoop hdfs,hive,hbase等数据存储系统。b.其实就是将 sqoop命令转换成 ...
分类:
其他好文 时间:
2019-05-06 19:26:59
阅读次数:
129
一、校验数字的表达式 1. 数字:^[0-9]*$ 2. n位的数字:^\d{n}$ 3. 至少n位的数字:^\d{n,}$ 4. m-n位的数字:^\d{m,n}$ 5. 零和非零开头的数字:^(0|[1-9][0-9]*)$ 6. 非零开头的最多带两位小数的数字:^([1-9][0-9]*)+( ...
分类:
其他好文 时间:
2019-05-05 23:12:32
阅读次数:
122
xml文件的节点值获取和节点值设置 /// <summary> /// 保存单个点节点的值 /// </summary> /// <param name="UpNodeName">父级节点名称</param> /// <param name="NodeName">子节点名称</param> /// ...
分类:
其他好文 时间:
2019-05-05 18:13:36
阅读次数:
162
一、创建表并导入日志数据,引出问题##建表hive (default)> create table IF NOT EXISTS default.bf_log_src( > remote_addr string, > remote_user string, > time_local string, .... ...
分类:
其他好文 时间:
2019-05-05 18:00:11
阅读次数:
118
1安装JDK请参照jdk的安装步骤。2安装Hadoop请参照hadoop安装步骤。3下载Hive下载地址:http://mirrors.tuna.tsinghua.edu.cn/apache/hive/在该地址下载稳定版本的hive,我下载的版本是:apache-hive-2.1.1-bin.tar.gz将下载的hive安装包上传到服务器上的~/Downloads目录下。4安装Hive4.1解压h
分类:
其他好文 时间:
2019-05-04 12:12:03
阅读次数:
442
[toc] 1、YUM安装gitlab 11.10.4 下载gitlab ce的repo 安装gitlab 访问192.168.0.130会有英文界面,用户名为root,首次登陆需要修改密码,修改完成后,进入页面。点击右上角的Settings进行Preferences设置,在语言项选择中文,此时刷新 ...
分类:
其他好文 时间:
2019-05-04 12:09:01
阅读次数:
203
20175312 2018 2019 2 《Java程序设计》第10周学习总结 教材学习内容总结 已依照蓝墨云班课的要求完成了第十二章的学习,主要的学习渠道是PPT,和书的课后习题。 总结如下: 1、第十二章的主要内容: Java中的线程 Thread类与线程的创建 线程的常用方法 线程同步 协调同 ...
分类:
编程语言 时间:
2019-05-04 09:31:47
阅读次数:
152
二 Hive安装环境准备 2.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3)下载地址: http:/ ...
分类:
其他好文 时间:
2019-05-03 18:52:54
阅读次数:
212