码迷,mamicode.com
首页 >  
搜索关键字:算子    ( 933个结果
Flink之流式框架的对比
Flink的优势和特点: 一、同时支持高吞吐、低延迟、高性能 Flink是目前开源社区中唯一一套集高吞吐、低延迟、高性能三者于一身的分布式流式数据处理框架。Apache Spark也只能兼顾高吞吐和高性能特点,主要是因为Spark Streaming流式计算中无法做到低延迟保障;而流式计算框架Apa ...
分类:其他好文   时间:2020-12-03 11:33:38    阅读次数:5
Flink从入门到真香(16、Flink内置的一些Process Function)
之前的转换算子是无法访问事件的时间戳信息和水位线信息的,而这在一些应用场景下,极为重要。例如MapFunction这样子的map转换算子就无法访问时间戳或者当前事件的事件事件。基于此,DataStreamAPI提供了一系列LOW-LEVEL的转换算子调用。可以访问时间戳,watermark以及注册定时事件,还可以输出特定的一些事件,例如超时时间等。processfunction用来构建事件驱动的应
分类:其他好文   时间:2020-12-01 11:59:48    阅读次数:3
J - Prime Game(数论分解质因子)
题意就是算子区间内的不同质因子的个数 题目大意:有一个长度为n的序列a,定义mul(l, r)为区间[l, r]中a[i]的乘积, fac(l, r)为mul(l, r)不同素数因子的个数。求所有区间fac的和。 和这个题有点类似 给定一个长度为n的序列,然后求出每一个子区间不同数的个数和。而这一道 ...
分类:其他好文   时间:2020-11-26 14:12:51    阅读次数:4
Flink实例(四十三): Operators(四)FLATMAP
FLATMAP flatMap算子和map算子很类似,不同之处在于针对每一个输入事件flatMap可以生成0个、1个或者多个输出元素。事实上,flatMap转换算子是filter和map的泛化。所以flatMap可以实现map和filter算子的功能。图5-3展示了flatMap如何根据输入事件的颜 ...
分类:其他好文   时间:2020-11-12 13:42:51    阅读次数:7
【源码】Flink 三层图结构——StreamGraph 生成前准备 Transformation
最近一直在看 StreamGraph 生成的源码,刚好有点思路,准备动手了发现,如果不说下 Transformation 后面的 StreamGraph 会差比较多意思,所以先做点铺垫。 ## Transformation Transformation 类是 Flink 转换算子的基类,实现类有下面 ...
分类:其他好文   时间:2020-11-08 17:01:29    阅读次数:21
OPEN CV系列二:图像处理(二)
### 图像梯度 laplacian算子 img = cv2.imread('0.jpg',cv2.IMREAD_GRAYSCALE )sobelx = cv2.Sobel(img, cv2.CV_64F, 1, 0, ksize=3) # x方向sobelx = cv2.convertScaleA ...
分类:其他好文   时间:2020-11-02 10:21:19    阅读次数:21
Checkpointing
上级:https://www.cnblogs.com/hackerxiaoyon/p/12747387.html 每个函数和算子都可以有状态在flink中。状态的函数存储数据通过独立的元素或事件处理。为了让状态具有容错性,flink需要把状态进行快照。检查点允许flink恢复状态和位置在流中,从而是 ...
分类:其他好文   时间:2020-10-29 09:52:49    阅读次数:16
halcon算子说明
1.shape_trans_xld 获取的最小外接矩形点顺序 shape_trans_xld(ContoursAffineTrans, XLDTrans,'rectangle2') get_contour_xld(XLDTrans, Row1, Col1) tuple_min(Row1,rowMin ...
分类:其他好文   时间:2020-09-24 22:05:26    阅读次数:59
神盾首创非对称联邦学习,深度保障数据隐私
神盾首创非对称联邦学习范式,在保护弱势方数据样本ID隐私的前提下完成常见的联邦计算任务 ...
分类:其他好文   时间:2020-09-18 00:47:20    阅读次数:26
Flink常用算子代码实现(Scala和Java)
Flink常用算子代码实现 (Scala版本和Java版本) ...
分类:编程语言   时间:2020-09-11 16:15:56    阅读次数:71
933条   上一页 1 2 3 4 5 ... 94 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!