码迷,mamicode.com
首页 >  
搜索关键字:kafka producer    ( 4768个结果
Kafka 可视化监控和管理 UI工具评估
以下内容,来自网络资料整理和个人安装使用结果。后续会持续更新 ...
分类:其他好文   时间:2020-07-04 21:13:41    阅读次数:90
RabbitMQ简介
如果从消息组件来讲主要划分为两类: JMS组件:ActiveMQ(慢) AMQP组件(协议):性能是最高的,而AMQP有两个主要的开源项目: |-RabbitMQ:使用最为广泛,速度也很快 |-Kafka:是在大数据时代产生的,未来明日之星。 RabbitMQ系统架构在所有的消息系统之中,其基本由生 ...
分类:其他好文   时间:2020-07-04 16:53:00    阅读次数:71
ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer)
启动kafka时,kafka进程无法启动,查阅log发现存在如下问题: 2020-07-04 10:44:54,659] ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServ ...
分类:其他好文   时间:2020-07-04 15:27:07    阅读次数:53
常用架构 框架 设计等术语
NoSql (memcache Redis) 全文搜索:Sphinx、Elasticsearch、Solr Kafka Redis/MC MC指的是memcache SSD Cache 固态硬盘 Solid State Disk或Solid State Drive,简称SSD DOCKER LEVE ...
分类:其他好文   时间:2020-07-04 15:02:16    阅读次数:123
Docker 安装 kafka
简单安装为了集成 SpringBoot,真实使用,增加增加更多配置,比如将log映射出来 1.安装 zookeeper [root@centos-linux ~]# docker pull wurstmeister/zookeeper [root@centos-linux ~]# docker pu ...
分类:其他好文   时间:2020-07-03 23:42:13    阅读次数:296
springboot(7) rabbitmq
一.消息发送端 pom.xml <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId> </dependency> application.y ...
分类:编程语言   时间:2020-07-03 21:42:43    阅读次数:76
Kafka 消息丢失与消费精确一次性
消息丢失的场景 如果Kafka Producer使用“发后即忘”的方式发送消息,即调用producer.send(msg)方法来发送消息,方法会立即返回,但此时并不能说明消息已经发送成功。消息发送方式详见初次邂逅Kafka生产者。 如果在消息过程中发生了网络抖动,那么消息就会丢失;或发送的消息本身不 ...
分类:其他好文   时间:2020-07-03 19:33:54    阅读次数:55
Rabbitmq常见的模式
1. AMQP 1.1. 相关概念介绍 AMQP 一个提供统一消息服务的应用层标准高级消息队列协议,是应用层协议的一个开放标准,为面向消息的中间件设计。 AMQP是一个二进制协议,拥有一些现代化特点:多信道、协商式,异步,安全,扩平台,中立,高效。 RabbitMQ是AMQP协议的Erlang的实现 ...
分类:其他好文   时间:2020-07-03 15:31:57    阅读次数:44
Flume整合Kafka(基于kerberos认证)——完成实时数据采集
如果现在要想将flume中的sink设置为kafka,因为在实际的开发中,可能会有若干个子系统或者若干个客户端进行flume日志采集,那么能够承受这种采集任务量的只有kafka来完成,可是需要注意一个问题,现在的kafka是采用了Kerberos认证,所以要想在flume之中去使用kafka操作,就 ...
分类:Web程序   时间:2020-07-03 01:11:20    阅读次数:154
【Kafka】Kafka写入的数据不丢失原理
Kafka 的核心架构原理。 ##Kafka 分布式存储架构 那么现在问题来了,如果每天产生几十 TB 的数据,难道都写一台机器的磁盘上吗?这明显是不靠谱的啊! 所以说,这里就得考虑数据的分布式存储了,我们结合 Kafka 的具体情况来说说。 在 Kafka 里面,有一个核心的概念叫做“Topic” ...
分类:其他好文   时间:2020-07-01 17:26:55    阅读次数:67
4768条   上一页 1 ... 28 29 30 31 32 ... 477 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!