Spark-Streaming DirectKafka count 统计跟直接 kafka 统计类似,只不过这里使用的是 Direct 的方式,Direct方式使用的 kafka 低级API,不同的地方主要是在 createDirectStream这里。 统计代码如下 启动相关的 flume,kaf ...
分类:
其他好文 时间:
2019-07-28 19:56:51
阅读次数:
109
JDBC(Java Database Connectivity:Java访问数据库的解决方案)定义一套标准接口,即访问数据库的通用API,不同数据库厂商根据各自数据的特点去实现这些接口。 第1部分 JDBC工作过程: 1)加载驱动,建立连接; 2) 创建语句对象; 3) 执行SQL语句; 4) 处理 ...
分类:
数据库 时间:
2019-04-05 19:53:51
阅读次数:
175
本章讲解了程序是怎样运行的,不同的程序不同的环境上不一定可以运行,而操作系统和硬件决定了程序的运行环境,同一类的硬件可以选择安装多种操作系统,但从程序运行环境来考虑,CPU的种类是特别重要的,从Windows克服了CPU以外的硬件差异可以看出(CPU不同本地代码不同)。不同操作系统的API不同,因不 ...
分类:
其他好文 时间:
2019-02-15 13:16:51
阅读次数:
157
HashMap和Hashtable的区别 答: ## 1. 历史原因:Hashtable是陈旧API,HashMap是JAVA1.2引进的Map接口的一个实现 ## 2.同步性:Hashtable是线程安全的,也就是同步的,HashMap是线程不安全的,也就是不同步的。由于同步检查所以Hashtab ...
分类:
其他好文 时间:
2018-11-22 02:58:38
阅读次数:
212
简介 Spark SQL 是 Spark 处理结构化数据的一个模块.与基础的 Spark RDD API 不同, Spark SQL 提供了查询结构化数据及计算结果等信息的接口.在内部, Spark SQL 使用这个额外的信息去执行额外的优化.有几种方式可以跟 Spark SQL 进行交互, 包括 ...
分类:
数据库 时间:
2018-06-30 14:52:23
阅读次数:
492
服务拆分 根据业务或组织架构进行基本服务拆分,每个服务实例会拥有专属的网络地址、独立的计算资源,并且独立部署。客户端通过访问服务实例的地址来调用服务 API。不同服务也可以相互调用。 统一配置管理 一个服务可能会跑多个实例,每个服务实例都会需要做配置。为了方便统一调整配置,我们可以把配置中心化,每个 ...
分类:
其他好文 时间:
2018-06-28 11:02:58
阅读次数:
211
基本概念 IdentityServer4是一个基于OpenID Connect和OAuth 2.0的针对ASP.NET Core 2.0的框架。 IdentityServer4可以帮助我们实现什么 IdentityServer是将规范兼容的OpenID Connect和OAuth 2.0终结点添加到 ...
分类:
其他好文 时间:
2017-12-05 14:30:36
阅读次数:
221
一、时间不同 HashTable是JDK1.0出现的,HashMap是JDK1.2版本后出现的。 二·API不同 两者都是通过哈希表来实现键值映射,但是具体的接口和父类不一样 HashTable和HashMap都实现了Map、cloneable、serializable接口,但是HashTable继 ...
分类:
其他好文 时间:
2017-12-03 16:27:39
阅读次数:
116
一、JavaMail概述: JavaMail是由Sun定义的一套收发电子邮件的API,不同的厂商可以提供自己的实现类。但它并没有包含在JDK中,而是作为JavaEE的一部分。 厂商所提供的JavaMail服务程序可以有选择地实现某些邮件协议,常见的邮件协议包括: l SMTP:简单邮件传输协议,用于 ...
分类:
编程语言 时间:
2017-10-26 15:32:14
阅读次数:
343
Spark SQL 是 Spark 处理结构化数据的一个模块.与基础的 Spark RDD API 不同, Spark SQL 提供了查询结构化数据及计算结果等信息的接口.在内部, Spark SQL 使用这个额外的信息去执行额外的优化.有几种方式可以跟 Spark SQL 进行交互, 包括 SQL... ...
分类:
数据库 时间:
2017-09-26 21:01:26
阅读次数:
340