一、Data Sinks 在使用 Flink 进行数据处理时,数据经 Data Source 流入,然后通过系列 Transformations 的转化,最终可以通过 Sink 将计算结果进行输出,Flink Data Sinks 就是用于定义数据流最终的输出位置。Flink 提供了几个较为简单的 ...
分类:
其他好文 时间:
2020-06-28 09:50:59
阅读次数:
76
在学习springboot-vue前后端分离项目过程中, 需要很多中间件和工具来架构好项目。这就使得每次开始就要打开控制台运行redis、elasticsearch、rabbitMQ等十分麻烦, 我就寻思着十分可以用.bat批量一次性执行所有任务, 折腾个把小时后找到了办法。 ...
1.首先定义两个路由 Route::get('/{name}','Conterller@index'); Route::get('/routes','Conterller@routes'); 2.创建中间件php artisan make:middleware checkName 创建中间件目录如下 ...
分类:
其他好文 时间:
2020-06-26 12:41:12
阅读次数:
72
scrapy异步的爬虫框架。 异步的爬虫框架。 高性能的数据解析,持久化存储,全栈数据的爬取,中间件,分布式 框架:就是一个集成好了各种功能且具有很强通用性的一个项目模板。 环境安装: Linux: pip3 install scrapy Windows: a. pip3 install wheel ...
分类:
编程语言 时间:
2020-06-25 21:26:24
阅读次数:
65
#前言 多年前入职了现在的公司,当时还没有完整的异常测试的体系,后来根据自己的经验结合现状,帮助公司建立了一套异常测试的流程和文档,和另外的同学一起设计了异常故障注入平台,也完成了一些演练的落地,在这里做一些总结。 #kv故障演练 kv即key-value数据库,业界普遍使用的有redis、zook ...
分类:
其他好文 时间:
2020-06-25 17:20:29
阅读次数:
199
一,shardingjdbc的用途 1,官方站介绍: Apache ShardingSphere 是一套开源的分布式数据库中间件解决方案组成的生态圈, 它由 JDBC、Proxy 和 Sidecar(规划中)这 3 款相互独立,却又能够混合部署配合使用的产品组成。 它们均提供标准化的数据分片、分布式 ...
分类:
数据库 时间:
2020-06-24 20:09:19
阅读次数:
224
RabbitMQ 是一款优秀的消息中间件。相比于 kafka 更好上手,相比于 ActiveMQ 拥有更好的性能。 RabbitMQ 支持单机部署,集群部署。 集群部署有包括 : 普通模式(多节点集群)、镜像集群。 节点分为 : 磁盘节点(disc) 和 内存节点 (RAM)。 镜像集群其实也是 镜 ...
分类:
其他好文 时间:
2020-06-24 00:25:28
阅读次数:
55
为什么需要自己构建Docker镜像 使用docker仓库中镜像的好处 对于 Docker 用户来说,最好的情况是不需要自己创建镜像。因为使用docker官方仓库中的镜像好处是省去自己做镜像的工作量。 在docker的官方仓库中,几乎所有常用的数据库、中间件、应用软件等。我们只需要稍作配置就可以直接使 ...
分类:
其他好文 时间:
2020-06-23 13:34:52
阅读次数:
66
.中间件一共分为5种 应用级中间件 路由级中间件 内置中间件 第三方中间件 错误处理中间件 1.应用级中间件 当拦截到请求后 自动执行回调函数 -按照url拦截 应用级中间件必须按照顺序写 同一个服务器下不允许乱顺序; app.use( URL, (req,res,next)=>{ next() 是 ...
分类:
数据库 时间:
2020-06-23 00:49:39
阅读次数:
98
下面这篇微软官方文档,介绍了如何在ASP.NET Core中自定义中间件(middleware): Write custom ASP.NET Core middleware 其中注意这句话: Additional parameters for the constructor and Invoke/I ...
分类:
Web程序 时间:
2020-06-22 23:13:52
阅读次数:
68