kafka消息中间件
作者:mmseoamin日期:2024-01-18

kafka与zookeeper安装包:

链接:https://pan.baidu.com/s/1b4DkzQttIfkA6DilC5AsWg?pwd=i9s9 

提取码:i9s9


一、kafka依赖

1:需要jdk(我这使用的是1.8)

yum -y install java-1.8.0-openjdk

2:需要zookeeper

1 > 解压:tar -zxvf  包名

2 > cd /usr/local/zookeeper/zookeeper-3.4.12

3 > mkdir data    #创建数据存放位置

4 > mkdir log       #创建日志存放位置

5 > cd /usr/local/zookeeper/zookeeper-3.4.12/conf  #cd 到配置文件目录下

6 > cp zoo_sample.cfg zoo.cfg     #备份一份数据

7 > vim zoo.cfg      #重新配置dataDir和dataLogDir的存储路径

kafka消息中间件,第1张

 3:启动zookeeper

在bin目录下

#启动Zookeeper

./zkServer.sh start

#查询Zookeeper状态

./zkServer.sh status

#关闭Zookeeper状态

./zkServer.sh stop

注:若zookeeper启动失败,那么修改zkServer.sh里面的内容

kafka消息中间件,第2张

 二、安装kafka

1:配置

解压文件

tar -xvf 包名

#编辑server.properties

vim server.properties

server.properties文件内容如下:

broker.id=0

listeners=PLAINTEXT://localhost:9092       #这里把#删除打开这个配置

num.network.threads=3

num.io.threads=8

socket.send.buffer.bytes=102400

socket.receive.buffer.bytes=102400

socket.request.max.bytes=104857600

log.dirs=/tmp/kafka-logs

num.partitions=1

num.recovery.threads.per.data.dir=1

offsets.topic.replication.factor=1

transaction.state.log.replication.factor=1

transaction.state.log.min.isr=1

log.retention.hours=168

log.segment.bytes=1073741824

log.retention.check.interval.ms=300000

zookeeper.connect=localhost:2181

zookeeper.connection.timeout.ms=6000

group.initial.rebalance.delay.ms=0

其中有四个重要的参数:

• broker.id:唯一标识ID

• listeners=PLAINTEXT://localhost:9092:kafka服务监听地址和端口

• log.dirs:日志存储目录

• zookeeper.connect:指定zookeeper服务地址

可根据自己需求修改对应的配置!

 2:启动(bin目录下,否者加上绝对路劲)

./kafka-server-start.sh  -daemon ../config/server.properties

3:创建主题(lkx 这个主题名称根据自己调整)

./kafka-topics.sh --bootstrap-server localhost:9092 --create --topic lkx --partitions 2 --replication-factor 1 

4:创建完之后查看

./kafka-topics.sh --list --bootstrap-server localhost:9092

kafka消息中间件,第3张

 5:发送测试

./kafka-console-producer.sh --broker-list localhost:9092 --topic lkx

kafka消息中间件,第4张

6:接收测试

 ./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic lkx --from-beginning

kafka消息中间件,第5张

另外的是写文档之前插入的