互联网寒冬！Mysql和Redis数据同步该怎么做

谁借莪１个温暖的怀抱￠ 2022-10-13 01:47 130阅读 0赞

### kafka面试基础\[17\] ###

1.Kafka的用途有哪些？使用场景如何？

2.Kafka中的ISR、AR又代表什么？ISR的伸缩又指什么

3.Kafka中的HW、LEO、LSO、LW等分别代表什么？

4.Kafka中是怎么体现消息顺序性的？

5.Kafka中的分区器、序列化器、拦截器是否了解？它们之间的处理顺序是什么？

6.Kafka生产者客户端的整体结构是什么样子的？

7.Kafka生产者客户端中使用了几个线程来处理？分别是什么？

8.Kafka的旧版Scala的消费者客户端的设计有什么缺陷？

9.“消费组中的消费者个数如果超过topic的分区，那么就会有消费者消费不到数据”这句话是否正确？如果正确，那么有没有什么hack的手段？

10.有哪些情形会造成重复消费？

11.哪些情景下会造成消息漏消费？

12.KafkaConsumer是非线程安全的，那么怎么样实现多线程消费？

13.简述消费者与消费组之间的关系

14.当你使用kafka-topics.sh创建（删除）了一个topic之后，Kafka背后会执行什么逻辑？

15.topic的分区数可不可以增加？如果可以怎么增加？如果不可以，那又是为什么？

16.topic的分区数可不可以减少？如果可以怎么减少？如果不可以，那又是为什么？

17.创建topic时如何选择合适的分区数？

### kafka面试进阶\[15\] ###

1.Kafka目前有哪些内部topic，它们都有什么特征？各自的作用又是什么？

2.优先副本是什么？它有什么特殊的作用？

3.Kafka有哪几处地方有分区分配的概念？简述大致的过程及原理

4.简述Kafka的日志目录结构

5.Kafka中有哪些索引文件？

6.如果我指定了一个offset，Kafka怎么查找到对应的消息？

7.如果我指定了一个timestamp，Kafka怎么查找到对应的消息？

8.聊一聊你对Kafka的Log Retention的理解

9.聊一聊你对Kafka的Log Compaction的理解

10.聊一聊你对Kafka底层存储的理解

11.聊一聊Kafka的延时操作的原理

12聊一聊Kafka控制器的作用

13.Kafka的旧版Scala的消费者客户端的设计有什么缺陷？

14.消费再均衡的原理是什么？（提示：消费者协调器和消费组协调器）

15.Kafka中的幂等是怎么实现的？

### kafka面试高阶\[12\] ###

1.Kafka中的事务是怎么实现的？

2.失效副本是指什么？有哪些应对措施？

3.多副本下，各个副本中的HW和LEO的演变过程

4.Kafka在可靠性方面做了哪些改进？（HW, LeaderEpoch）

5.为什么Kafka不支持读写分离？

6.Kafka中的延迟队列怎么实现

7.Kafka中怎么实现死信队列和重试队列？

8.Kafka中怎么做消息审计？

9.Kafka中怎么做消息轨迹？

10.怎么计算Lag？(注意read\_uncommitted和read\_committed状态下的不同)

11.Kafka有哪些指标需要着重关注？

12.Kafka的哪些设计让它有如此高的性能？

答案在这里啦！！整理起来好多呀，有30页…

![image.png][]

看完了笔记，刷了面试真题，最后对整个kafka知识做个梳理总结：控制器（Controller）、生产者、配置参数、消费者、Broker端、主题与分区、文件目录、时间轮(TimingWheel)等

## 最后的话 ##

**无论是哪家公司，都很重视Spring框架技术，重视基础，所以千万别小看任何知识。面试是一个双向选择的过程，不要抱着畏惧的心态去面试，不利于自己的发挥。  
同时看中的应该不止薪资，还要看你是不是真的喜欢这家公司，好了希望这篇文章对大家有帮助！  
另外本人整理收藏了多家公司面试知识点整理 ，以及各种Java核心知识点免费分享给大家，  
下方只是部分截图 想要资料的话可以[戳这里即可免费领取][Link 1]。**  
公司面试知识点整理 ，以及各种Java核心知识点免费分享给大家，  
下方只是部分截图 想要资料的话可以[戳这里即可免费领取][Link 1]。\*\*  
![在这里插入图片描述][6dc06c8e56546cbdd1c5f26f25dc59f0.png]

[image.png]: /images/20221005/4b6d142abe1e41cb9457689f8763ff50.png
[Link 1]: https://docs.qq.com/doc/DSmxTbFJ1cmN1R2dB
[6dc06c8e56546cbdd1c5f26f25dc59f0.png]: /images/20221005/55afbb2c011c4d8fa6b93283b784ade8.png

发表评论取消回复

表情：

评论列表（有 0 条评论，130人围观）

还没有评论，来说两句吧...

相关阅读

相关 MySQL 大数据in查询该怎么优化

对于 MySQL 中的大数据 `IN` 查询，可以使用以下方法进行优化： 1. 尽可能使用索引。如果使用 `IN` 操作符的字段有索引，MySQL 将会使用索引来加速查询。

短命女/ 2024年03月26日 09:04/ 0 赞/ 73 阅读

相关 Mysql和Redis数据同步之Canal

canal是阿里研发的一款用于数据同步的中间件，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费。工作原理如下： canal 模拟 MySQL s

逃离我推掉我的手/ 2023年10月11日 21:28/ 0 赞/ 61 阅读

相关互联网寒冬，我该怎样继续前行，身后亦须留心。

文章内容过长，文末准备了，彩蛋希望读者喜欢！ “上午还在改Bug，下午就被裁了……” “还是体制内的工作好啊……” “工作太难找了，我都开始怀疑自己的能力了” 2019

浅浅的花香味﹌/ 2023年10月08日 11:02/ 0 赞/ 8 阅读

相关登录该怎么做？

考虑点 1. 支持三方登录，如微信、QQ、微博等 2. 平台统一登录（账号密码、手机及验证码） 3. 数据库、LDAP 4. Token、JWT、Oauth2、Red

淡淡的烟草味﹌/ 2023年06月07日 13:26/ 0 赞/ 65 阅读

相关 Redis和mysql数据怎么保持数据一致的？

需求起因在高并发的业务场景下，数据库大多数情况都是用户并发访问最薄弱的环节。所以，就需要使用redis做一个缓冲操作，让请求先访问到redis，而不是直接访问MySQL

痛定思痛。/ 2023年02月09日 13:12/ 0 赞/ 30 阅读

相关互联网寒冬！Mysql和Redis数据同步该怎么做

kafka面试基础\[17\] 1.Kafka的用途有哪些？使用场景如何？ 2.Kafka中的ISR、AR又代表什么？ISR的伸缩又指什么 3.Kafka中的HW、L

谁借莪１个温暖的怀抱￠/ 2022年10月13日 01:47/ 0 赞/ 131 阅读

相关性能测试到底该怎么做？

三高人群作为一名开发者，我们最长听到的就是编程界的三高：高性能、高并发、高可用。听起来非常高大上，但是性能到底如何呢？又该如何评定呢？这次我们谈一谈性能测试

心已赠人/ 2022年08月31日 07:19/ 0 赞/ 301 阅读

相关 MySQL和Redis 数据同步解决方案整理

做一个Redis箱格信息数据同步到数据库Mysql的功能。大概方案。 1.队列同步，变跟数据2份，使用消息队列，一份给Redis消费，一份给Mysql消费。 2.后台定

女爷i/ 2022年06月05日 04:07/ 0 赞/ 343 阅读

相关 Redis和MySQL的区别与使用（redis做mysql的缓存并且数据同步）

一、redis和mysql介绍 Redis基于内存，读写速度快，也可做持久化，但是内存空间有限，当数据量超过内存空间时，需扩充内存，但内存价格贵。 MySQL基于磁盘，

叁歲伎倆/ 2022年05月16日 03:09/ 0 赞/ 255 阅读

相关 404页面该怎么做？

404页面该怎么做？ 404页面的目的是：告诉浏览者其所请求的页面不存在或链接错误，同时引导用户使用网站其他页面而不是关闭窗口离开。很多开源系统如CMS系统、Blog...

朱雀/ 2021年06月05日 02:52/ 0 赞/ 477 阅读