Ubuntu 16.04 安装 kafka 完整版

小鱼儿 2022-01-22 12:45 348阅读 0赞

# 2020.03.26 更新 #

**安装kafka 另一种方式：**

kafka也再带zookeeper ，所以安装一个kafka就可以 （zookeeper想用那个都行，主要看心情吧）

启动方式：**nohup ./kafka-server-start.sh ../config/server.properties 1>/dev/null 2>&1 &**

### =================================================== ###

# Ubuntu 16.04 安装 kafka 完整版 #

### 一、环境 ###

**Ubuntu 16.04**** **

## **注意 ：Ubuntu 的内存大小8G ，不然 jdk 运行不起来，在配置jdk 的环境变量之后一定要查看 jdk是否配置成功。还有脚本的编写，一定要对，大小写，标点符号，缺一不可；** ##

### 二、安装包 ###

![20190606114156125.png][]   ![20190606114219601.png][]

**zookeeper：[http://mirrors.shu.edu.cn/apache/zookeeper/][http_mirrors.shu.edu.cn_apache_zookeeper]**

**kafka：[http://kafka.apache.org/downloads][http_kafka.apache.org_downloads]**

选择你自己想要的版本然后进行下载

### 第一步： ###

用 XSHell 软件将 两个安装包 上传到Ubuntu 16.04 上，然后把这连个安装包放在你经常用的目录下

**mv /home/user/zookeeper-3.4.14.tar.gz**

![20190606115536225.png][]

然后解压缩

**tar -zxvf zookeeper-3.4.14.tar.gz   /   tar -zxvf kafka\_2.12-2.2.1.tgz**

我把解压缩的文件夹，放在了 **tools** 这个目录下了

### 第二步： ###

创建四个脚本 ，分别是 ：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70][]

**命令行 ：touch runkafka.sh**

进行加权限操作，命令：**chmod -R 777 kafka**，给整个kafka文件夹加权限

![20190606120204980.png][]

开始编辑四个.sh文件，**runzookeeper.sh**文件如下

**./zookeeper-3.4.14/bin/zkServer.sh start zoo.cfg**

![2019060612065923.png][]

**runkafka.sh**文件如下

**./kafka\_2.12-2.2.1/bin/kafka-server-start.sh ./kafka\_2.12-2.2.1/config/server.properties**

![20190606120812852.png][]

**stopzookeeper.sh**文件如下

**./zookeeper-3.4.14/bin/zkServer.sh stop zoo.cfg**

![20190606120925941.png][]

**stopkafka.sh** 文件如下

**./kafka\_2.12-2.2.1/bin/kafka-server-stop.sh**

![20190606121000654.png][]

### 第三步： ###

配置文件的修改同Windows下一样，

![20190606123539249.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70 1][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70 2][]

修改完之后，运行：

先运行 zookeeper ，命令行：**sh ./runzookeeper.sh   **

**后运行kafka  ，   命令行：sh ./runkafka.sh**

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70 3][]

### 结果：运行成功 ###

![2019060612412267.png][]

![20190606124207858.png][]

## kafka启动时报异常 ##

**Caused by: java.nio.file.FileSystemException: \\tmp\\kafka-logs\\topic.alarmMatchFace-0\\00000000000000009163.log -> \\tmp\\kafka-logs\\topic.alarmMatchFace-0\\00000000000000009163.log.deleted: 另一个程序正在使用此文件，进程无法访问。**

**       主要是因为tmp/kafka-logs文件的日志达到了1G且未被清理。由于这样的错误是在kafka服务关闭后重启kafka服务引起的，暂无好的解决方法，把tmp下的kafka-logs文件夹删除，再启动kafka服务就不会报错了。**

**====================================================================**

如果出现运行kafka的时候报错 ：

## 错误：Ubuntu kafka 第 306 行:exec: java: 未找到 ##

### 原因：没有配置Java 的环境变量 ，或是 Ubuntu 没有安装 Java ###

# Ubuntu 安装jdk  #

jdk 地址：[https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html][https_www.oracle.com_technetwork_java_javase_downloads_jdk8-downloads-2133151.html]

### 第一步：解压缩 ###

![20190606124741199.png][]

tar -zxvf jdk-8u201-linux-x64.tar.gz

然后配置环境变量：使用命令打开**/etc/profile**文件

# java 环境变量
    export JAVA_HOME=/usr/lib/jdk/jdk1.8.0_171
    export JRE_HOME=${JAVA_HOME}/jre    
    export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib    
    export PATH=${JAVA_HOME}/bin:$PATH 
    #kafka
    export KAFKA_HOME=/opt/tools/kafka_2.12-2.2.1
    export PATH=$PATH:$KAFKA_HOME/bin
    #配置ZOOKEEPER环境变量
    export ZOOKEEPER_HOME=/opt/tools/zookeeper-3.4.14
    export PATH=$PATH:$ZOOKEEPER_HOME/bin

![20190606124927226.png][]

执行命令：**source /etc/profile ** 是环境变量立即生效

**java -version ，**查看是否安装成功了

![20190606125133579.png][]

然后在重新启动程序，如果程序没有起来，莫慌

**reboot ，**重启一下Ubuntu ！

[Linux 虚拟机 关机、重启命令][Linux _]

然后在启动kafka 和zookeeper ，完成！！

[20190606114156125.png]: https://img-blog.csdnimg.cn/20190606114156125.png
[20190606114219601.png]: /images/20220122/e9ab476299654656aad3f4b00f567353.png
[http_mirrors.shu.edu.cn_apache_zookeeper]: http://mirrors.shu.edu.cn/apache/zookeeper/
[http_kafka.apache.org_downloads]: http://kafka.apache.org/downloads
[20190606115536225.png]: /images/20220122/6f03822e232f43bb8fa5319abfbd3a6c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70]: /images/20220122/68a6df04940f47b098a9e79d04193dfc.png
[20190606120204980.png]: /images/20220122/becb1f75e3c14221a4f58df0696ad56e.png
[2019060612065923.png]: /images/20220122/b90db363721b40ce8933a84d8a0ff0bb.png
[20190606120812852.png]: /images/20220122/e3ee7410839d434fb8bfb0743279498a.png
[20190606120925941.png]: /images/20220122/eb1f0ebcb2c34f288df78d96e303fbac.png
[20190606121000654.png]: /images/20220122/62d2a9eb49fd4af992dda284dc0d7973.png
[20190606123539249.png]: /images/20220122/e86263434f5740f9a43f9a30b276a257.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70 1]: /images/20220122/00dbf2821ae64c3ea560a8c40aafbca4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70 2]: /images/20220122/0e6758979710462dbcd2631c72942648.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzI4Mjg5NDA1_size_16_color_FFFFFF_t_70 3]: /images/20220122/e144c406749d4cbf8433af17aa134f57.png
[2019060612412267.png]: /images/20220122/c67ff294b65b4f31b15e235e4195ac83.png
[20190606124207858.png]: /images/20220122/7a8ed33f179448389bb3bb7c1a87e05f.png
[https_www.oracle.com_technetwork_java_javase_downloads_jdk8-downloads-2133151.html]: https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
[20190606124741199.png]: /images/20220122/cec538869a0a43928019971ee8ed6102.png
[20190606124927226.png]: /images/20220122/a14abc91c51240cab7fda0e413555d5c.png
[20190606125133579.png]: /images/20220122/8e5d7fc766f645b680fd22ad0133fe9c.png
[Linux _]: https://blog.csdn.net/qq_28289405/article/details/88030969