centos7安装Kafka单节点环境部署二-安装与配置kafka

1、下载kafka

复制代码
wget https://archive.apache.org/dist/kafka/2.8.1/kafka_2.12-2.8.1.tgz

2、解压到/usr/local/

复制代码
mkdir -p /usr/local/kafka2.12
tar -zxf  kafka_2.12-2.8.1.tgz -C /usr/local/kafka2.12 --strip-components=1 #--strip-components选项表示从目录级别上去除指定的前缀,以实现更加控制解压的效果

3、修改配置文件

复制代码
cd /usr/local/kafka2.12/config/
vi server.properties
broker.id=0
log.dir=/data/kafka/logs #配置zookeeper管理kafka的路径
zookeeper.connect=localhost:2181
listeners=PLAINTEXT://:9092 #配置kafka的监听端口
advertised.listeners=PLAINTEXT://192.168.0.190:9092 #把kafka的地址端口注册给zookeeper,如果是远程访问要改成外网IP

4、创建kafka日志目录

复制代码
mkdir -p /data/kafka/logs

5、配置kafka快捷路径

复制代码
vi /etc/profile
export KAFKA_HOME=/usr/local/kafka2.12
export PATH=$KAFKA_HOME/bin:$PATH
source /etc/profile

6、启动、停止kafka

启动kafka前必须先启动zookeeper
复制代码
cd /usr/local/kafka2.12/bin
kafka-server-start.sh -daemon ../config/server.properties #启动
kafka-server-stop.sh #停止

7、设置开机自动服务

复制代码
vi /lib/systemd/system/kafka.service
[Unit]
Description=Apache Kafka server (broker)
After=network.target zookeeper.service
[Service]
Type=simple
Environment="PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/local/jdk/1.8.0_391/bin"
User=root
Group=root
ExecStart=/usr/local/kafka2.12/bin/kafka-server-start.sh /usr/local/kafka2.12/config/server.properties
ExecStop=/usr/local/kafka2.12/bin/kafka-server-stop.sh
Restart=on-failure
[Install]
WantedBy=multi-user.target

systemctl enable kafka.service #加入开机启动
systemctl start kafka.service #启动
systemctl stop kafka.service #停止
systemctl status kafka.service #状态

8、开放防火墙

复制代码
firewall-cmd --zone=public --add-port=9092/tcp --permanent
firewall-cmd --reload
firewall-cmd --list-ports

9、测试kafka配置开机启动是否成功

复制代码
netstat -lntup
jps

10、创建一个topic

复制代码
kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic testTopic

11、查看创建了多少个topic

复制代码
kafka-topics.sh --list --zookeeper localhost:2181

12、创建一个生产者进行发送消息

复制代码
kafka-console-producer.sh --broker-list localhost:9092 --topic testTopic

>whart^H
>what's your name?
>shtuup
>wangyulong
>kafka test is't

13、创建一个消费者来进行接收消息

复制代码
kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic testTopic --from-beginning

在此,单点式的kafka已经安装完毕,如果重启了之后,需要先删除kafka的logs日志记录,否则无法启动kafka。一般kafka我们会配合ES使用的。

相关推荐
海上小飞龙13 小时前
Redis 分布式锁原理:从 SET NX EX 到 Redisson 看门狗
数据库·redis·分布式
明达智控技术15 小时前
国产PLC、远程IO模块在食品包装机的应用
分布式·自动化
YOU OU20 小时前
RabbitMQ应用问题
分布式·rabbitmq
YOU OU1 天前
RabbitMQ高级特性
分布式·rabbitmq
富士康质检员张全蛋1 天前
Kafka 事物
kafka
珠***格1 天前
双碳目标下:四可装置如何助力光伏消纳与碳数据上报
网络·人工智能·分布式·安全·边缘计算
科力锐品牌君1 天前
行业龙头|科力锐全链路防勒索 + 多中心容灾方案,构筑河南翔宇医疗业务安全闭环!
网络·数据库·分布式·安全·数据安全·备份
wear工程师2 天前
Kafka 消费者心跳正常,为什么还会被踢出组?拆清 max.poll.interval.ms
java·kafka
WHS-_-20222 天前
基于网络感知自适应树与辅助路由加速地理分布式机器学习
网络·分布式·机器学习
Kripath_Rion2 天前
带你速通计算机经典论文(一):分布式系统篇
分布式·后端·架构