Apache DolphinScheduler 诞生记 DolphinScheduler,简称”DS”, 中文名 “小海豚调度”(海豚聪明、人性化,又左右脑可互相换班,终生不用睡觉)。希望 DolphinScheduler 就像它的名字一样,成为一个“开箱即用”的灵活易用的调度系统。 1概述 DAG ...
分类:
Web程序 时间:
2020-08-03 19:58:52
阅读次数:
138
针对hive on mapreduce 1:我们可以通过一些配置项来使Hive在执行结束后对结果文件进行合并: 参数详细内容可参考官网:https://cwiki.apache.org/confluence/display/Hive/Configuration+Properties 1 2 3 4 ...
分类:
数据库 时间:
2020-08-03 19:56:21
阅读次数:
103
nginx可以实例负载均衡。准备工作操作系统:欧拉2.8armecs-cecd-0002:192.168.0.141#Nginx服务器ecs-cecd-0001:192.168.0.8#Web服务器ecs-cecd-0003:192.168.0.92#Web服务器配置web访问在ecs-cecd-0001与ecs-cecd-0003上安装httpd:yuminstall-yhttpd在ecs-ce
分类:
其他好文 时间:
2020-08-03 09:43:06
阅读次数:
86
1. 导入所需jar包 2. 在classpath下(src下)新建 struts.xml <?xml version="1.0" encoding="UTF-8"?> <!DOCTYPE struts PUBLIC "-//Apache Software Foundation//DTD Strut ...
分类:
其他好文 时间:
2020-08-01 21:22:03
阅读次数:
75
什么是Jmeter Apache JMeter 是 Apache 组织开发的基于 Java 的压力测试工具,也可以进行接口测试。它是一个开源的,100%基于Java的应用程序,带有图形界面。它旨在分析和衡量Web应用程序和各种服务的性能和负载功能行为。 Jmeter主要用于测试Web应用程序或FTP ...
分类:
其他好文 时间:
2020-08-01 09:21:32
阅读次数:
96
一次机房停电引发的思考今天早上到公司的时候,接到开发反馈DEV环境所有接口都卡,耗时都在一分钟以上,严重影响开发正常工作,然后通过网关的日志定位到原因是因为kafka集群不可用(总共3个broker,前一天晚上机房停电导致leader节点挂了),导致网关的反爬过滤器里面发送kafka消息的代码kafkaTemplat.send阻塞了60s,当时在想这个send方法不是异步的吗,为什么会阻塞60s?
分类:
其他好文 时间:
2020-07-31 01:13:59
阅读次数:
93
一、安装JDK 略过 二、安装Zookeeper 由于Kafka的运行依赖于Zookeeper,所以在运行Kafka之前需要安装并运行Zookeeper 1.Zookeeper下载路径 http://zookeeper.apache.org/releases.html#download 2.解压到文 ...
分类:
其他好文 时间:
2020-07-30 22:13:36
阅读次数:
66
例子: <!-- poi --><dependency> <groupId>org.apache.poi</groupId> <artifactId>poi</artifactId> <version>3.17</version> <exclusions> <exclusion> <groupId> ...
分类:
数据库 时间:
2020-07-30 21:49:59
阅读次数:
87
package com.shine.eiuop.utils; import org.apache.poi.ss.usermodel.*; import org.apache.poi.hssf.usermodel.HSSFCell;import org.apache.poi.ss.usermodel. ...
分类:
编程语言 时间:
2020-07-30 18:26:57
阅读次数:
76
什么是Kafka?Apache Kafka是一个分布式发布 - 订阅消息系统和一个强大的队列,可以处理大量的数据,并使您能够将消息从一个端点传递到另一个端点。 Kafka适合离线和在线消息消费。 Kafka消息保留在磁盘上,并在群集内复制以防止数据丢失。 Kafka构建在ZooKeeper同步服务之 ...
分类:
其他好文 时间:
2020-07-30 14:47:03
阅读次数:
73