转载 Kafka Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、sto ...
分类:
其他好文 时间:
2018-02-08 20:22:12
阅读次数:
222
一、精选 二、参考资料 基础 1. "JMS(Java消息服务)入门教程" 2. "Sun Java System Message Queue 3.7 UR1 技术概述" 3. "消息队列 推/拉模式学习 & ActiveMQ及JMS学习" 4. "分布式消息中间件(五)——MQ基础详解" ...
分类:
其他好文 时间:
2018-02-07 22:56:10
阅读次数:
212
springmvc+mybatis+dubbo分布式平台-maven构建根项目
准备技能
开发语言:JAVA/J2EE
项目构建管理:Maven
持续集成方案:Jenkins
SOA服务: Dubbo、zookeeper、Restful
SSO单点登录:Redis、JWT、Restful
分布式缓存:Redis
分布式消息中间件:zookeeper+kafka
分布式文件:FastDFS
分类:
编程语言 时间:
2018-01-19 11:29:54
阅读次数:
222
APM.Server 消息推送服务的实现 消息推送服务 服务器推送目前流行就是私信、发布/订阅等模式,基本上都是基于会话映射,消息对列等技术实现的;高性能、分布式可以如下解决:会话映射可采用redis cluster等技术实现,消息对列可使用kafka等分布式消息队列方案实现。 APM.Server ...
分类:
其他好文 时间:
2018-01-19 00:20:07
阅读次数:
288
以下是消息队列以下的大纲,本文主要介绍消息队列概述,消息队列应用场景和消息中间件示例(电商,日志系统)。 本次分享大纲 消息队列概述 消息队列应用场景 消息中间件示例 JMS消息服务(见第二篇:大型网站架构系列:分布式消息队列(二)) 常用消息队列(见第二篇:大型网站架构系列:分布式消息队列(二)) ...
分类:
Web程序 时间:
2018-01-17 18:17:11
阅读次数:
305
本文转载于网上的文章 《最全最强解析:支付宝系统架构内部剖析(架构图)》。 最早的出处没有找到,原文作者也未知。 如果你知道请告诉我。 支付宝系统架构概况 典型处理默认 资金处理平台 财务会计 支付清算 核算中心 交易 柔性事务 消息系统 数据分布 数据缓存 支付宝技术产品线 支付宝的开源分布式消息 ...
分类:
其他好文 时间:
2018-01-15 00:12:50
阅读次数:
231
分布式
分布式服务:Dubbo+Zookeeper+Proxy+Restful
分布式消息中间件:KafKa+Flume+Zookeeper
分布式缓存:Redis 分布式文件:FastDFS
负载均衡:Keepalived+Nginx+Proxy(三重负载)
分类:
编程语言 时间:
2018-01-09 11:12:29
阅读次数:
754
Kafka Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/ ...
分类:
其他好文 时间:
2017-12-31 11:00:47
阅读次数:
208
Kafka高性能的特点及条件 Kafka是一个高吞吐量分布式消息中间件,并且提供了消息的持久化功能。其高可行有两个重要的特点: 利用了磁盘连续读写性能显著高于随机读写性能的特点 并发,将一个topic拆分为多个partition 磁盘的连续性 要充分利用磁盘连续读写高性能的特点,就意味着要减少操作系 ...
分类:
其他好文 时间:
2017-12-29 12:19:51
阅读次数:
147
原文地址:http://www.woshipm.com/pmd/160822.html+ 支付宝系统架构概况 典型处理默认 资金处理平台 财务会计 支付清算 核算中心 交易 柔性事务 支付宝的开源分布式消息中间件–Metamorphosis(MetaQ) Metamorphosis (MetaQ) ... ...
分类:
其他好文 时间:
2017-12-25 19:30:53
阅读次数:
167