文章目录
- 1.单节点搭建
- 1.1 下载安装包
- 1.2 配置环境变量
- 1.3 配置配置文件
- 1.4 启动
- 启动zookeeper
- 启动kafka
- 1.5 创建启动脚本startKafka.sh
- 2.简单的使用
- 2.1 创建topic
- 2.2 查看topic
- 2.3 producer生产数据
- 2.4 consumer消费者拉取数据
1.单节点搭建
1.1 下载安装包
#解压
tar -xzf kafka_2.12-3.3.1.tgz
#修改名字,也可以修改也可以不改
mv kafka_2.12-3.3.1 kafka-2.12
1.2 配置环境变量
vi /etc/profile
# 加入以下配置
export KAFKA_HOME=/opt/software/kafka_2.12-3.3.1
export PATH=$PATH:$KAFKA_HOME/bin
#重新加载配置文件
source /etc/profile
1.3 配置配置文件
单机版的可以不进行修改
vi server.properties
broker.id=0 #注意:这里要唯一的Integer类型
log.dirs=/kafka-logs #真实数据存储的位置
zookeeper.connect=node02:2181 #zookeeper
1.4 启动
启动zookeeper
# Start the ZooKeeper service
$ bin/zookeeper-server-start.sh config/zookeeper.properties
启动kafka
$ bin/kafka-server-start.sh /opt/software/kafka_2.12-3.3.1/config/server.properties
1.5 创建启动脚本startKafka.sh
在安装目录下创建启动脚本
nohup /opt/software/kafka_2.12-3.3.1/bin/kafka-server-start.sh /opt/software/kafka_2.12-3.3.1/config/server.properties > /opt/software/kafka_2.12-3.3.1 /kafkalog.txt 2>&1 &
启动
[root@node02 bin]# ./startKafka.sh
[root@node02 bin]# jps
12673 Kafka
9234 QuorumPeerMain
13036 Jps
2.简单的使用
2.1 创建topic
[root@node02 bin]# ./kafka-topics.sh --create --topic mytopic --bootstrap-server localhost:9092
Created topic mytopic.
2.2 查看topic
[root@node02 bin]# ./kafka-topics.sh --list --bootstrap-server localhost:9092
mytopic
2.3 producer生产数据
[root@node02 bin]# ./kafka-console-producer.sh --topic mytopic --bootstrap-server localhost:9092
>hello,kafka
>hello,world
>
2.4 consumer消费者拉取数据
[root@node02 bin]# ./kafka-console-consumer.sh --topic mytopic --from-beginning --bootstrap-server localhost:9092
hello,kafka
hello,world