kafka 学习（一）介绍与下载

逃离我推掉我的手 2021-11-17 19:42 239阅读 0赞

# 1.什么是kafka #

Kafka是一种高吞吐量的[分布式][Link 1]发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据

# 2.kafka的作用 #

**解辑**:在项目启动之初来预测将来会碰到什么需求是极其困难的。消息中间件在处理过程 中间插入了一个隐含的、基于数据的接口层，两边的处理过程都要实现这一接口，这允许你独 立地扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束即可

**冗余**〈存储) 有些情况下，处理数据的过程会失败。消息中间件可以把数据进行持久化直 到它们已经被完全处理，通过这一方式规避了数据丢失风险。在把 个消息从消息中间件中删 除之前，需要你的处理系统明确地指出该消息己经被处理完成，从而确保你的数据被安全地保 存直到你使用完毕。

**扩展性**: 因为消息中间件解捐了应用的处理过程，所以提高消息入队和处理的效率是很容 易的，只要另外增加处理过程即可，不需要改变代码，也不需要调节参数。

**削峰**: 在访问量剧增的情况下，应用仍然需要继续发挥作用，但是这样的突发流 并不常 见。如果以能处理这类峰值为标准而投入资源，无疑是巨大的浪费 使用消息中间件能够使关 键组件支撑突发访问压力，不会因为突发的超负荷请求而完全崩惯

**可恢复性**: 当系统一部分组件失效时，不会影响到整个系统 消息中间件降低了进程间的 稿合度，所以即使 个处理消息的进程挂掉，加入消息中间件中的消息仍然可以在系统恢复后 进行处理

**顺序保证**: 在大多数使用场景下，数据处理的顺序很重要，大部分消息中间件支持 定程 度上的顺序性。

**缓冲**: 在任何重要的系统中，都会存在需要不同处理时间的元素。消息中间件通过 个缓 冲层来帮助任务最高效率地执行，写入消息中间件的处理会尽可能快速 该缓冲层有助于控制 和优化数据流经过系统的速度。

**异步通信**: 在很多时候应用不想也不需要立即处理消息 消息中间件提供了异步处理机制， 允许应用把 些消息放入消息中间件中，但并不立即处理它，在之后需要的时候再慢慢处理

# 3.kafka下载 #

[https://www.apache.org/dist/kafka/][https_www.apache.org_dist_kafka]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0ODc0Nzg0_size_16_color_FFFFFF_t_70][]

当前最新稳定版为2.3.0

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0ODc0Nzg0_size_16_color_FFFFFF_t_70 1][]

下载后解压

![20190731100236319.png][]

# 3.kafka安装 #

安装文章[https://blog.csdn.net/qq\_34874784/article/details/97891242][https_blog.csdn.net_qq_34874784_article_details_97891242]

[Link 1]: https://baike.baidu.com/item/%E5%88%86%E5%B8%83%E5%BC%8F/19276232
[https_www.apache.org_dist_kafka]: https://www.apache.org/dist/kafka/
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0ODc0Nzg0_size_16_color_FFFFFF_t_70]: /images/20211116/1ccbf4ef811d457a9422cc9ad5c5a16c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM0ODc0Nzg0_size_16_color_FFFFFF_t_70 1]: /images/20211116/36beb31646674a74a16434d756ea34d6.png
[20190731100236319.png]: /images/20211116/afe4df4930594fcb97a4fa395431b30d.png
[https_blog.csdn.net_qq_34874784_article_details_97891242]: https://blog.csdn.net/qq_34874784/article/details/97891242