C:\ProgramFiles\iMC\server\conf目录下打开qvdm.conf文件,修改其中字段#settingloglevel(DEBUG,INFO,WARNING,ERROR,FATAL)LogLevel=INFO//该处将INFO修改为DEBUG,重启imcapmedm.exe进程,收集完日志,再改回INFO,并重启进程。#settinglogexpire(itsunitisda
分类:
其他好文 时间:
2020-07-06 18:13:22
阅读次数:
75
Hadoop的整体框架 Hadoop由HDFS、MapReduce、HBase、Hive和ZooKeeper等成员组成。 HBase是一个开源的,基于列存储模型的分布式数据库 HDFS是一个分布式文件系统。有着高容错性的特点,并且设计用来部署在低廉的硬件上,适合那些有着超大数据集的应用程序 MapR ...
分类:
其他好文 时间:
2020-07-06 15:47:59
阅读次数:
67
一 组网需求: 1.PC使用超级终端管理交换机,可以在超级终端上显示相应数据报文的debug调试信息; 2.PC远程TELNET管理交换机,可以在TELNET终端上显示相应数据报文的debug调试信息。 二 配置步骤: 向本地超级终端输出debug信息 1.在用户视图模式下打开ip icmp的调试开 ...
分类:
其他好文 时间:
2020-07-06 11:18:16
阅读次数:
227
websockets介绍 websockets这个新协议为客户端提供了一个更快、更有效的通信线路。像HTTP一样,websockets运行在TCP连接之上,但是它们更快,因为我们不必每次都打开一个新的连接来发送消息,因为只要服务器或客户端想要,连接就会一直保持活跃。 更好的是,由于连接永远不会中断, ...
分类:
Web程序 时间:
2020-07-06 10:58:08
阅读次数:
65
一、创建一个简单的例子 from flask import Flask app = Flask(__name__) @app.route('/') def index(): return '<h1>Hello world!</h1>' 这是一个完整的应用,视图函数index使用app.route装饰 ...
分类:
其他好文 时间:
2020-07-06 01:23:00
阅读次数:
65
FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.q... ...
分类:
编程语言 时间:
2020-07-05 23:03:01
阅读次数:
289
4、行转列 1.相关函数说明 CONCAT(string A/col, string B/col…):返回输入字符串连接后的结果,支持任意个输入字符串; CONCAT_WS(separator, str1, str2,...):它是一个特殊形式的 CONCAT()。第一个参数剩余参数间的分隔符。分隔 ...
分类:
其他好文 时间:
2020-07-05 21:37:44
阅读次数:
56
reflect函数可以支持在sql中调用java中的自带函数,秒杀一切udf函数。 使用java.lang.Math当中的Max求两列中最大值 创建hive表 create table test_udf(col1 int,col2 int) row format delimited fields t ...
分类:
其他好文 时间:
2020-07-05 21:00:30
阅读次数:
253
1、使用explode函数将hive表中的Map和Array字段数据进行拆分 lateral view用于和split、explode等UDTF一起使用的,能将一行数据拆分成多行数据,在此基础上可以对拆分的数据进行聚合,lateral view首先为原始表的每行调用UDTF,UDTF会把一行拆分成一 ...
分类:
其他好文 时间:
2020-07-05 21:00:05
阅读次数:
80
hive当中也带有很多的窗口函数以及分析函数,主要用于以下这些场景 (1)用于分区排序 (2)动态Group By (3)Top N (4)累计计算 (5)层次查询 1、创建hive表并加载数据 创建表 hive (hive_explode)> create table order_detail( ...
分类:
其他好文 时间:
2020-07-05 20:55:24
阅读次数:
60