故事背景今年年初的时候写了一篇文章《围观:基于事件机制的内部解耦之心路历程》。这篇文章主要讲的是用ES数据异构的场景。程序订阅MysqlBinlog的变更,然后程序内部使用SpringEvent来分发具体的事件,因为一个表的数据变更可能会需要更新多个ES索引。为了方便大家理解我把之前方案的图片复制过来了,如下:上图的方案存在一个问题,就是我们今天文章要聊的内容。这个问题就是当MQConsumer收
分类:
其他好文 时间:
2020-07-31 01:13:30
阅读次数:
71
阐述背景线程池在日常工作中用的还挺多,当需要异步,批量处理一些任务的时候我们会定义一个线程池来处理。在使用线程池的过程中有一些问题,下面简单介绍下之前遇到的一些问题。场景一:实现一些批量处理数据的功能,刚开始线程池的核心线程数设的比较小,然后想调整下,只能改完后重启应用。场景二:有一个任务处理的应用,会接收MQ的消息进行任务的处理,线程池的队列也允许缓存一定数量的任务。当任务处理的很慢的时候,想看
分类:
编程语言 时间:
2020-07-31 01:13:08
阅读次数:
97
项目推荐https://github.com/yinjihuan/kitty-cloudMaven依赖没处理好的话经常会导致发生一些问题,非常烦。今天给大家分享一个依赖相关的问题,说不定你之前就遇到过。问题背景有个ES搜索的项目,刚开始还是好好的状态,过了一段时间,然后就发现启动时报错了。看了下Git提交日志,也没有改动过,神奇的代码世界。错误如下图所示,很明显的错误,经常会碰到,肯定是依赖版本的
分类:
其他好文 时间:
2020-07-31 01:11:31
阅读次数:
67
0、背景在当今世界,各行各业每天都有海量数据产生,为了从这些海量数据中获取想要的分析结果,需要对数据进行提取、转换,存储,维护,管理和分析。这已然远远超出了普通处理工具、数据库等的实现能力,只有基于的分布式架构和并行处理机制的大数据工具所才能实现这些功能。Elasticsearch是响应如前所述大多数用例的最热门的开源数据存储引擎之一。Elasticsearch是一种分布式数据存储和搜索引擎,具有
分类:
其他好文 时间:
2020-07-31 01:10:28
阅读次数:
62
故事背景有个朋友在微信上问我,说Feign调用的时候服务提供方有结果,但是在调用方这边这个字段的值却丢失了,我一听感觉不可思议,如果说全部的值都没有,那有可能是报错了之类的情况。但是某一个字段的值不见了,这种情况还真没遇到过。下图就是调用方的获取的信息,nickname值丢了。Feign内部排查数据是否取到如果服务提供方有值并且返回了,那么唯一的问题就是出在Feign的内部了,怀疑跟内部解码有关系
分类:
编程语言 时间:
2020-07-31 01:08:17
阅读次数:
139
项目地址https://github.com/yinjihuan/kitty-cloud背景做这个项目主要是想将个人的一些经验通过开源的形式进行输出,不一定能帮到所有人,有感兴趣的朋友可以关注学习下。项目主要分为三大块:Kitty基础框架基础框架基于SpringCloud&SpringCloudAlibaba进行封装,内置了Cat监控等功能,将框架的操作进行统一封装和版本管理,方便快速构建
分类:
其他好文 时间:
2020-07-31 01:03:32
阅读次数:
132
本场景介绍如何使用函数计算服务开发一个IP查询工具。 体验目标 本场景将提供一台配置了CentOS 7.7的ECS实例(云服务器)。通过本教程的操作,您可以基于已有的环境开发一个基于函数计算的IP查询工具。 背景知识 什么是Serverless 自2006年8月9日,Google首席执行官埃里克·施 ...
分类:
其他好文 时间:
2020-07-30 22:14:05
阅读次数:
81
背景 小编最近接触了Mysql数据库表反射生成java实体类(POJO)和映射文件(xml文件),使用Netbeans上的jeddict插件生成JPA(JPA是Java Persistence API的简称,中文名Java持久层API,是JDK 5.0注解或XML描述对象-关系表的映射关系,并将运行 ...
分类:
数据库 时间:
2020-07-30 22:09:10
阅读次数:
76
==背景== 数据库:我们的生产环境中有一个设备运行的数据库使用的是InfluxDB,这里面存储了所有设备上报上来的实时运行数据,数据量增速较快。 功能需求:产品有一个叫趋势分析的功能,用来按照不同的算子(mean、max等),不同的时间段(1分钟、30分钟)等对数据进行聚合。 ==版本== Inf ...
分类:
数据库 时间:
2020-07-30 21:52:35
阅读次数:
100
粉丝朋友们,不知道大家看故事看腻了没(要是没腻可一定留言告诉我^_^),今天这篇文章换换口味,正经的来写写技术文。言归正传,咱们开始吧!今天的这篇文章,聊一个轩辕君之前工作中遇到的需求:如何在Java中调用Python代码?要不要先Mark一下,说不定将来哪天就用上了呢?本文结构:-需求背景-进击的Python-Java和Python-给Python加速-寻找方向-Jython?-Python-&
分类:
编程语言 时间:
2020-07-30 21:48:15
阅读次数:
66