Kafka--常用shell命令

1.启动Kafka，其中">>/dev/null"表示将日志信息输出到"黑洞"，其中"2>&1"表示将错误信息和前面的日志信息一样，也输出到"黑洞"，末尾的"&"表示以后台方式启动kafka：

bin/kafka-server-start.sh*** config/server.properties >>/dev/null 2>&1 &

2.启动生产者，往"accesslog"这个Topic中发送消息：

bin/kafka-console-producer.sh --topic accesslog --broker-list localhost:9092

3.启动消费者，从"accesslog"这个Topic中消费消息，其中"--from-beginning"为可选参数，表示要从头消费消息：

bin/kafka-console-consumer.sh --topic accesslog --from-beginning --zookeeper localhost:2181

4.创建一个名为"mytopic"的Topic：

bin/kafka-topics.sh --create --topic mytopic --replication-factor 2 --partitions 3 --zookeeper localhost:2181 

5.查看"mytopic"这个Topic的详细信息：

bin/kafka-topics.sh --describe --topic mytopic --zookeeper localhost:2181

6.查看所有的Topic列表：

bin/kafka-topics.sh --list--zookeeper localhost:2181

7.kafka集群批量启动脚本：

说明：通过"start-kafka.sh"脚本，读取"kafka/bin"目录下"slave"文件中配置的主机列表，并通过一个while循环，用ssh分别启动各个主机上的kafka服务器。

[root@hadoop01 bin]# cat start-kafka.sh 
cat /root/apps/kafka/bin/slave | while read line do {
  echo $line ssh $line "source /etc/profile;nohup kafka-server-start.sh /root/apps/kafka/config/server.properties >/dev/null 2>&1 &" }& wait
done
[root@hadoop01 bin]# cat slave 
hadoop01
hadoop02
hadoop03
[root@hadoop01 bin]#