安装Kafka
1 )解压安装包
[yanxiaodai@master packge]$ tar -zxvf kafka_2.11-0.11.0.0.tgz -C /home/yanxiaodai/module
2 )修改解压后的文件名称
[yanxiaodai@master module]$ mv kafka_2.11-0.11.0.0.tgz kafka
3 )在kafka目录下创建logs文件
[yanxiaodai@master kafka]mkdir logs
4 )修改配置文件
[yanxiaodai@master kafka]cd config/
[yanxiaodai@master config]sudo vi server.properties
修改以下的文件
#broker的全局唯一编号,不能重复
broker.id=0
#删除topic功能使能
delete.topic.enable=true
#kafka运行日志存放的路径
log.dirs=/home/yanxiaodai/module/kafka/logs
#配置连接Zookeeper集群地址
zookeeper.connect=master:2181,service01:2181,service02:2181
5 )配置环境变量
[yanxiaodai@master module]$ sudo vi /etc/profile
#KAFKA_HOME
export KAFKA_HOME=/home/yanxiaodai/module/kafka
export PATH=$PATH:$KAFKA_HOME/bin
刷新文件
[yanxiaodai@master module]$ source /etc/profile
6 )分发安装包
[yanxiaodai@master module]$ scp -r kafka/ yanxiaodai@service01:/home/yanxiaodai/module/
[yanxiaodai@master module]$ scp -r kafka/ yanxiaodai@service02:/home/yanxiaodai/module/
7 )分别在service01、service02上修改配置文件
[yanxiaodai@service01 kafka]cd config/
[yanxiaodai@service01 config]sudo vi server.properties
#broker的全局唯一编号,不能重复
broker.id=1
[yanxiaodai@service02 kafka]cd config/
[yanxiaodai@service02 config]sudo vi server.properties
#broker的全局唯一编号,不能重复
broker.id=2
8 )启动
启动kafka之前先要启动zookeeper
依次在master、service01、service02节点上启动kafka
[yanxiaodia@mster kafka]$ bin/kafka-server-start.sh config/server.properties &
[yanxiaodai@service kafka]$ bin/kafka-server-start.sh config/server.properties &
[yanxiaodai@service kafka]$ bin/kafka-server-start.sh config/server.properties &
9 )关闭
关闭kafka时,显示报错:No kafka server to stop。
应当修改 kafka-server-stop.sh 脚本
[yanxiaodia@mster bin]$ sudo vi kafka-server-stop.sh
修改前:
PIDS=$(ps ax | grep -i 'kafka.Kafka' | grep java | grep -v grep | awk '{print $1}')
修改后:
PIDS=$(jps -lm | grep -i 'kafka.Kafka' | awk '{print $1}')
使用
ps -lm命令列出所有的java进程,然后通过管道,利用grep -i 'kafka.Kafka'命令将kafka进程筛出来,最后再接一管道命令,利用awk将进程号取出来。
来源:oschina
链接:https://my.oschina.net/u/4330404/blog/4816245