1.1.1.读取文本数据 spark应用可以监听某一个目录,而web服务在这个目录上实时产生日志文件,这样对于spark应用来说,日志文件就是实时数据 Structured Streaming支持的文件类型有text,csv,json,parquet ●准备工作 在people.json文件输入如下 ...
分类:
其他好文 时间:
2019-09-11 09:27:19
阅读次数:
137
最后一个点T,不知道怎么优化比较好。 c++ include using namespace std; typedef long long ll; typedef unsigned long long ull; typedef pair pii; define pb(x) push_back(x) ...
分类:
其他好文 时间:
2019-09-10 00:41:02
阅读次数:
102
新建一个maven工程 我们先在IDEA中新建一个名为ObjectSizeFetcherAgent的maven工程,如下图: 在maven项目中的pom.xml中新增一个打jar包的插件,如下: 在项目的resources中新建一个名为META-INF的目录,在这个目录下新建一个名为MANIFEST ...
分类:
编程语言 时间:
2019-09-08 19:59:18
阅读次数:
124
第一种方式:使用H5的API dataTransfer 实现思路: 1.为将要拖拽的元素设置允许拖拽,并赋予dragstart事件将其id转换成数据保存; 2.为容器添加dragover属性添加事件阻止浏览器默认事件,允许元素放置,并赋予drop事件进行元素的放置。 代码如下: 第二种方式:使用原生 ...
分类:
其他好文 时间:
2019-09-08 11:13:33
阅读次数:
159
1 源码解析 1.1 源码解析1(jdk中的JDBCUtils工具类) 1.2 源码解析2 1.3 源码解析3 1.4 源码解析4 1 源码解析 1.1 源码解析1(jdk中的JDBCUtils工具类) jdbc在springJDBC中的封装 1.2 源码解析2(mybaties应用的Configu ...
分类:
其他好文 时间:
2019-09-08 09:31:01
阅读次数:
74
一、Storm 1.1 简介 Storm 是一个开源的分布式实时计算框架,可以以简单、可靠的方式进行大数据流的处理。通常用于实时分析,在线机器学习、持续计算、分布式 RPC、ETL 等场景。Storm 具有以下特点: + 支持水平横向扩展; + 具有高容错性,通过 ACK 机制每个消息都不丢失; + ...
分类:
其他好文 时间:
2019-09-03 09:38:28
阅读次数:
91
在实例方法中引用Log,通常定义一个实例变量: 注意到实例变量log的获取方式是LogFactory.getLog(getClass()),虽然也可以用LogFactory.getLog(Person.class),但是前一种方式有个非常大的好处,就是子类可以直接使用该log实例。例如: 由于Jav ...
分类:
其他好文 时间:
2019-09-02 19:42:57
阅读次数:
163
1 2 3 4 5 6 10 11 12 13 14 15 16 17 18 19 109 ...
分类:
其他好文 时间:
2019-09-01 23:56:59
阅读次数:
179
1,定义 kettle是一款开源的ETL工具,纯java编写,可以在Windows、Linux、Unix上运行,绿色无需安装,数据抽取高效稳定。需要java环境才能运行。 2,官网下载地址 https://community.hitachivantara.com/s/article/data-int ...
分类:
数据库 时间:
2019-09-01 22:04:40
阅读次数:
111