在发送小消息的场景中,三个消息中间件的表现区分明显: Kafka的吞吐量高达17.3w/s,远超其他两个产品。这主要取决于它的队列模式保证了写磁盘的过程是线性IO。此时broker磁盘IO已达瓶颈。 RocketMQ也表现不俗,吞吐量在11.6w/s,磁盘IO %util已接近100%。Rocket ...
分类:
其他好文 时间:
2019-01-26 22:38:02
阅读次数:
245
2019年1月23日星期三 到2019年1月25日星期五 任务一:逆向安全暂停一段落,目前达到瓶颈,需要增长其他知识 任务二:研读使用Onlydbg从零开始creaking前10章 第一章:OD的各个窗口介绍 1、反汇编窗口(DESENSAMBLADO) 2、寄存器窗口(registros) 3、堆 ...
分类:
其他好文 时间:
2019-01-26 17:55:26
阅读次数:
189
直接运行iostat 以上输出中,包含三部分: avg-cpu中各列参数含义如下: 1. 若 %iowait 的值过高,表示硬盘存在I/O瓶颈 2. 若 %idle 的值高但系统响应慢时,有可能是CPU等待分配内存,此时应加大内存容量 3. 若 %idle 的值持续低于1,则系统的CPU处理能力相对 ...
分类:
移动开发 时间:
2019-01-26 16:19:35
阅读次数:
242
天行健,君子以自强不息;地势坤,君子以厚德载物。——《易经》 本章导读 Spark的初始化阶段、任务提交阶段、执行阶段,始终离不开存储体系。 Spark为了避免Hadoop读写磁盘的I/O操作成为性能瓶颈,优先将配置信息、计算结果等数据存入内存,极大的提升了系统的执行效率。 4.1 存储体系的概述 ...
分类:
其他好文 时间:
2019-01-25 20:05:21
阅读次数:
138
使用c3动画的时候, 更改哪些属性比较好, 动画怎么写最好. ...
分类:
Web程序 时间:
2019-01-25 19:21:10
阅读次数:
233
本篇文章将是『如何构建一个分布式爬虫』系列文章的最后一篇,拟从实战角度来介绍如何构建一个稳健的分布式微博爬虫。这里我没敢谈高效,抓过微博数据的同学应该都知道微博的反爬虫能力,也知道微博数据抓取的瓶颈在哪里。我在知乎上看过一些同学的说法,把微博的数据抓取难度简单化了,我只能说,那是你太naive,没深 ...
分类:
其他好文 时间:
2019-01-25 16:02:15
阅读次数:
169
这段时间,开始学习Flink,并了解了Spark与Flink的区别,开始觉得Flink大有取代Spark的趋势啊,实时流始终目前是Spark的瓶颈呀,下面来一张对比图: 图片来源于:https://jobs.zalando.com/tech/blog/apache-showdown-flink-vs ...
分类:
其他好文 时间:
2019-01-24 20:11:12
阅读次数:
162
MyCat MyCat用于解耦分布式数据库与java,比如分库分表以后,需要查询某条数据时,需要java根据需要查的数据先计算去哪个库查,然而有了Mycat就不用自己计算怎么存储,怎么查询了。MyCat把物理上分开的数据库,看成逻辑上只有一个库。java只需要针对MyCat编码即可。数据库中间件就是 ...
分类:
数据库 时间:
2019-01-24 11:55:52
阅读次数:
243
什么是python: Python 是一种开源的,解析性的,面向对象的编程语言。 可运行在多中计算机平台和操作系统中,如unix,windows,macos,Ubuntu,os/2等等。 优点: 优雅,明确,简单,尽量写少的代码 缺点: 运行速度慢(运行速度的瓶颈不在于python代码,而是数据库的 ...
分类:
编程语言 时间:
2019-01-23 17:27:22
阅读次数:
233
你问我答,准备面试需要做哪些技术储备,面试官更加关心什么方面的技术点?
分类:
其他好文 时间:
2019-01-22 21:47:04
阅读次数:
227