当前位置: 首页 > news >正文

网站迁移后 后台进不去福州响应式网站

网站迁移后 后台进不去,福州响应式网站,seo优化托管,360网站建设服务Kafka的结构图 多个Parttion共同组成这个topic的所有消息。每个consumer都属于一个consumer group,每条消息只能被consumer group中的一个Consumer消费, 但可以被多个consumer group消费。即组间数据是共享的,组内数据是竞争的。二、消费模型…

在这里插入图片描述

Kafka的结构图
多个Parttion共同组成这个topic的所有消息。每个consumer都属于一个consumer group,每条消息只能被consumer group中的一个Consumer消费,
但可以被多个consumer group消费。即组间数据是共享的,组内数据是竞争的。

二、消费模型

1、点对点消息传递模式

【发布者】-【queue】-【消费者】

点对点消息系统中,消息持久化到一个queue(队列)中。此时,将有一个或多个消费者消费队列中的数据。
但是一条消息只能被消费一次。当一个消费者消费了队列中的某条数据之后,该条数据则从消息队列中删除,
也就是消费者从Queue里面抢消息。

2、发布-订阅消息传递模式

【发布者】-【Topic】-【消费者】

发布-订阅消息系统中,消息被持久化到一个topic中。与点对点消息系统不同的是,消费者可以订阅一个或多个topic(分类),
消费者可以消费该topic中所有的数据,同一条数据可以被多个消费者消费,数据被消费后不会立马删除。

需要注意上面两种模式,是有条件的,只有Gruop组和Consumer达到一定的数量比,才会触发。

1、当某个Topic只有一个消费组订阅,且该消费组只有一个消费者时,就是队列(queue)下的点对点消费模式。

2、当某个Topic有多个消费组订阅,且每个消费组只有一个消费者时,就是发布订阅模式

三、消费过程

在这里插入图片描述
当2个消费者在消费同一个分区时,2个消费者都在在各自里面记录当前的offset。

在这里插入图片描述
生产者生产消息,添加到topIc时,每次都是追加到末尾。

在这里插入图片描述

为了提高Kafka的吞吐量,物理上把Topic分成一个或多个Partition,每个Partition都是有序且不可变的消息队列。
每个Partition在物理上对应一个文件夹,该文件夹下存储这个Partition的所有消息和索引文件。

在这里插入图片描述

消费者组,在不同的分区有不同的offset。

四、分区策略

所谓分区策略是决定【生产者】将消息发送到哪个分区的算法。Kafka为我们提供了
默认的分区策略,同时它也支持自定义分区策略。1、轮询策略:Round-robin 策略,即顺序分配。
轮询策略有非常优秀的负载均衡表现,它总是能保证消息最大限度地被平均分配到所有分区上,故默认情况下它是最合理的分区策略,也是最常用的分区策略之一。2、随机策略-Randomness 策略。随机就是随意地将消息放置到任意一个分区上。4、按消息键保序策略-Key-ordering 策略。
Kafka 允许为每条消息定义消息键,简称为 Key。这个 Key 的作用非常大,它可以是一个有着明确业务含义的字符串;也可以用来表征消息元数据。一旦消息被定义了 Key,那么你就可以保证同一个 Key 的所有消息都进入到相同的分区里面,由于每个分区下的消息处理都是有顺序的,故这个策略被称为按消息键保序策略。默认分区规则
1、如果指定的partition,那么直接进入该partition
2、如果没有指定partition,但是指定了key,使用key的 hash一选择partition。
3、如果既没有指定partition,也没有指定key,使用轮询一的方式进入partition。

五、ACK 应答机制

1、生产者确认机制

生产者发送消息,Broker落盘状态,0、1、all

2、消费者确认机制

在Kafka中,消费者确认是通过消费者位移的提交实现的。类似RabbitMQ的ACK机制。

消费者位移
每个 consumer 实例都会为它消费的分区维护属于自己的位置信息来记录当前消费了多少条消息。这在 Kafka 中有一个特有的术语:位移(offset)。
相比较将offset保存在服务器端(broker),这样虽然简单,但是有如下的问题:1、broker变成了有状态的,增加了同步成本,影响伸缩性。2、需要引入应答机制来确定消费成功。3、由于需要保存众多consumer的offset,可能需要引入复杂的数据结构,对资源有一定的浪费。在Kafka中,消费者组(Consumer Group)负责管理分发消费消息,因此将offset保存在消费者组中是比较合适的选择。其数据格式只需要是特定格式的整形数据即可。
offset 对于 consumer 非常重要,因为它是实现消息交付语义保证(message delivery semantic)的基石。
消息交付语义即最多一次、最少一次、精确一次。

在这里插入图片描述

http://www.yayakq.cn/news/429955/

相关文章:

  • 网站301跳转信息流广告形式主要有
  • dedecms网站logo男女做羞羞事试看网站
  • 济南网站seo外包简历模板免费网站
  • 任务一 分析电子商务网站栏目结构wordpress英语培训主题
  • 如何加强精神文明网站建设内容灵璧县住房和城乡建设局网站
  • 大型网站要多少钱wordpress站内查找
  • 擅自使用他人产品做网站宣传株洲seo排名
  • nft制作网站网站源码地址怎么看
  • window服务器如何做网站访问家庭农场网站建设
  • 茶叶网站建设要求如何建立自己的直播平台
  • 网站建设原则五大原则网络销售怎么做才能做好
  • 网站备案 个人组网方案公司注册资本可以随便填吗
  • 长春网站策划网站头部优化文字怎么做
  • 当前网站开发什么语言jupiter wordpress
  • 做网站 绍兴十大门户网站
  • 做旅游网站需要什么2024年新手机上市时间表
  • 做网站要求的资料营销型网站建设营销型
  • 地方汽车网站模板购买编程培训加盟
  • 南通企业网站建设公司网站设计与程序方向专业
  • 优秀网站建设服务wordpress外贸主题免费下载
  • dedecms企业网站深圳苍松大厦 网站建设
  • 网站建设全流程图视频网站开发价格
  • 河南县wap网站建设公司长沙建长沙建网站公司
  • 商城网站用html做.net网站内容管理系统
  • phpcms可以做哪些网站广东一站式网站建设报价
  • 企业网站建设一般要素有哪些南昌网站维护
  • 自治区住房和城乡建设厅网站响应式网站建设一般多少钱
  • 做网站和做appseo 视频
  • 集美培训网站建设百度有哪些app产品
  • 国外网站怎么做wordpress 影响力