相关链接

🎶 学员手册：【大数据专场 学习资料四】第四届字节跳动青训营 - 掘金

image-20220820191646359

消息队列概述

消息队列的应用场景

image-20220820191859709

上下游解耦

MQ 消息通道

image-20220820191934211

Eventbridge 数据总线

image-20220820192025556

Data Platform 流数据平台

image-20220820192053868

主流消息队列的相关介绍

image-20220820192124836

Kafka 详解

架构介绍

image-20220820192420977

Zookeeper

image-20220820192541469

Broker

image-20220820192552605

Controller

选举

image-20220820192642593

作用

image-20220820192746112

Coordinator

image-20220820192904912

高可用

image-20220820192925322

副本 ISR 机制

image-20220820193016250

写入 ACK 机制

image-20220820193131195

如何保证消息不丢

image-20220820193156151

ACK = -1 并且 最少 ISR = 2

image-20220820193424632

先看左下角，只有一个 leader 而没有 follwer 的情况，然后再看上面

结合右侧概念解释理解

image-20220821133358477

第一个策略更注重一致性

第二个更注重可用性

集群扩缩容

image-20220821133725961

扩容步骤

image-20220821133825433

扩缩容问题

image-20220821133904826

未来演进之路

image-20220821134053838

image-20220821134148801

image-20220821134352077

运维/调优经验介绍

image-20220821134533217

单机吞吐

image-20220821134643684

in_sync_replica 看业务重要性，2或3

集群参数配置

image-20220821134811898

扩缩容优化

image-20220821134954720

指标可视化

image-20220821135102988

Pulsar 详解

Pulsar 架构介绍

image-20220821135427981

Pulsar Proxy

image-20220821135535812

非必须，但是作用很大

Pulsar Broker

image-20220821135710646

Pulsar Storage

image-20220821135953333

image-20220821140023137

Pulsar IO

image-20220821140222237

Pulsar Function

image-20220821140310433

Bookkeeper 介绍

整体架构

image-20220821140401352

基本概念

image-20220821140844325

Bookkeeper Ledger

Bookkeeper 新建 Ledger

image-20220821140918983

Quorum 写：副本之间没有主从概念，例如 3 副本同时写，2 副本完成就算完成

Bookkeeper Ledger 分布

image-20220821141226391

写一致性

image-20220821141350638

读一致性

image-20220821141801387

读写分离

image-20220821141850775

Bookkeeper with pulsar

image-20220821141922991

Pulsar 特性介绍

image-20220821142249347

生产模式

image-20220821142628006

消费模式

image-20220821142732802

Exclusive

image-20220821142749340

Failover

image-20220821142808478

Shared

image-20220821142830329

Key_Shared

image-20220821142855907

多租户

image-20220821142929677

Plugin

image-20220821143054029

GEO Relication

image-20220821143240237

Pulsar HA & Scale-up

image-20220821143400392

image-20220821143458758

Pulsar VS Kafka

image-20220821143535476

存储计算分离

image-20220821143635954

周边和生态

概览

image-20220821143925357

Pulsar IO

image-20220821144407491

Kafka Schema

image-20220821144430794

Pulsar SQL

image-20220821144503728

总结

image-20220821144548672