未完成5月24_中间件kafka

超、凢脫俗 2021-12-05 06:19 184阅读 0赞

安装包放到/opt下 解压后

/opt/kafka

![1445954-20190524114318006-79257409.png][]

修改配置文件     vi server.properties

broker.id=0 每一个boker都有一个唯一的id作为它们的名字。

port=9092 broker server服务端口

num.network.threads=2 broker处理消息的最大线程数，一般情况下数量为cpu核数

num.io.threads=8 处理IO的线程数

socket.send.buffer.bytes=1048576 socket SO\_SNDBUFF参数

log.dirs=/tmp/kafka-logs kafka数据的存放地址，多个地址的话用逗号分割,多个目录分布在不同磁盘上可以提高读写性能

num.partitions=2 默认分区数

log.retention.hours=168 broker处理消息的最大线程数，一般情况下数量为cpu核数

zookeeper.connect=localhost:2181 zookeeper的地址和端口

zookeeper.connection.timeout.ms=1000000 zookeeper连接最大超时时间

启动kafka

后台执行命令：nohup bin/kafka-server-start.sh config/server.properties &

![1445954-20190524114740127-939543147.png][]

看日志：tail -f nohup.out

kafka

1、网络、磁盘io

2、buffer部分数据、定时推送

3、通过gzip方式进行压缩

转载于:https://www.cnblogs.com/njq666/p/10917520.html

[1445954-20190524114318006-79257409.png]: /images/20211205/55bd01673ea244219120b3cac5df5591.png
[1445954-20190524114740127-939543147.png]: /images/20211205/09b7078d9cb44fc5aa4ed138ab41eb73.png

发表评论取消回复

表情：

评论列表（有 0 条评论，184人围观）

还没有评论，来说两句吧...

相关阅读

相关 Apache kafka消息中间件

发布 & 订阅处理存储数据流，如消息传递系统 ...

灰太狼/ 2024年04月17日 13:54/ 0 赞/ 102 阅读

相关 kafka消息中间件-学习笔记

内容来源：[https://www.cnblogs.com/qingyunzong/p/9004509.html][https_www.cnblogs.com_qingyun

比眉伴天荒/ 2023年05月30日 03:48/ 0 赞/ 25 阅读

相关消息中间件-Kafka

Java中的消息是基于内存的消息中间件使用场景：异步：用户登录的时候，将用户信息写入数据库，发邮件给用户、发短信给用户，需要150ms，改为异步，将信息写入数据库，

你的名字/ 2023年01月21日 10:17/ 0 赞/ 26 阅读

相关微服务消息中间件 Kafka

微服务消息中间件 Kafka 微服务消息中间件 Kafka 1.kafka概述 1.1定义 1.2消息队列

刺骨的言语ヽ痛彻心扉/ 2022年10月30日 06:29/ 0 赞/ 223 阅读

相关高性能消息中间件Kafka实战

Kafka简介 ![20190123111356861.jpeg][] Kafka是一种高吞吐量的[分布式][Link 1]发布订阅消息系统，使用Scala编写。对

深碍√TFBOYSˉ_/ 2022年04月23日 02:30/ 0 赞/ 300 阅读

相关消息中间件（五）之-SpringBoot集成kafka消息中间件

springboot集成消息中间件的步骤十分简单、方便，但是针对不同的生产、消费情况需要调整相应的生产消费配置（这是一个繁杂的过程，因具体测试情况而慢慢摸索最适合的配置参数）。

深藏阁楼爱情的钟/ 2022年02月05日 07:15/ 0 赞/ 571 阅读

相关消息中间件-kafka

什么是Kafka kafka最初是LinkedIn的一个内部基础设施系统。最初开发的起因是，LinkedIn虽然有了数据库和其他系统可以用来存储数据，但是缺乏一个可以帮助

淩亂°似流年/ 2022年02月05日 02:34/ 0 赞/ 360 阅读

相关 python消息中间件 kafka

下载与安装 `Kafka` wget http://apache.fayea.com/kafka/2.2.1/kafka_2.12-2.2.1.tgz tar

清疚/ 2022年01月05日 13:25/ 0 赞/ 380 阅读

相关未完成5月24_中间件kafka

安装包放到/opt下解压后 /opt/kafka ![1445954-20190524114318006-79257409.png][] 修改配置文件 vi s

超、凢脫俗/ 2021年12月05日 06:19/ 0 赞/ 185 阅读

相关分布式消息中间件-kafka

Kafka 基础 Kafka 是一个分布式的基于发布/订阅模式的消息引擎系统 1. 削峰填谷 2. 应用解耦 3. 异步处理理 4. 高吐出（10

谁借莪１个温暖的怀抱￠/ 2021年10月09日 09:40/ 0 赞/ 543 阅读