查看主题
./kafka-topics.sh --list --zookeeper 10.1.5.76:2181/kafkammcs
删除主题
./kafka-topics.sh --zookeeper 10.1.5.76:2181/kafkammcs --delete --topic misc-subscription-topic
创建主题
代码上要创建10个分区才能成功如下--partitions 10
./kafka-topics.sh --create --zookeeper 10.1.5.76:2181/kafkammcs --replication-factor 1 --partitions 10 --topic misc-subscription-topic
查看订购关系组消费的情况
./kafka-consumer-groups.sh --bootstrap-server 10.1.5.76:9092 ,10.1.5.77:9092 --describe --group misc-subscription-group
以下是kafka常用命令行总结：
0.查看有哪些主题： ./kafka-topics.sh --list --zookeeper 192.168.0.201:12181
1.查看topic的详细信息
./kafka-topics.sh -zookeeper 127.0.0.1:2181 -describe -topic testKJ1
2、为topic增加副本
./kafka-reassign-partitions.sh -zookeeper 127.0.0.1:2181 -reassignment-json-file json/partitions-to-move.json -execute
3、创建topic
./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic testKJ1
4、为topic增加partition
./bin/kafka-topics.sh –zookeeper 127.0.0.1:2181 –alter –partitions 20 –topic testKJ1
5、kafka生产者客户端命令
./kafka-console-producer.sh --broker-list localhost:9092 --topic testKJ1
6、kafka消费者客户端命令
./kafka-console-consumer.sh -zookeeper localhost:2181 --from-beginning --topic testKJ1
7、kafka服务启动
./kafka-server-start.sh -daemon ../config/server.properties
8、下线broker
./kafka-run-class.sh kafka.admin.ShutdownBroker --zookeeper 127.0.0.1:2181 --broker #brokerId# --num.retries 3 --retry.interval.ms 60
shutdown broker
9、删除topic
./kafka-run-class.sh kafka.admin.DeleteTopicCommand --topic testKJ1 --zookeeper 127.0.0.1:2181
./kafka-topics.sh --zookeeper localhost:2181 --delete --topic testKJ1
10、查看consumer组内消费的offset
./kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --zookeeper localhost:2181 --group test --topic testKJ1
./kafka-consumer-offset-checker.sh --zookeeper 192.168.0.201:12181 --group group1 --topic group1
11 ./kafka-consumer-groups.sh --bootstrap-server 10.1.4.120:9092 ,10.1.4.120:19092 ,10.1.4.220:9092 --describe --group misc-subscription-group
12../kafka-consumer-groups.sh --bootstrap-server 10.1.5.76:9092 --describe --group misc-subscription-group
1、启动kafka
nohup ./kafka-server-start.sh ../config/server.properties &&>/dev/null 2>&1 &
或者不指定日志输出位置和设置
./kafka-server-start.sh ../config/server.properties &
2、查看所有topic
./kafka-topics.sh --zookeeper 172.18.111.106:2181 --list
3、删除topic
./kafka-topics.sh --delete --zookeeper 172.18.111.106:2181 --topic audit_db_audit_data_topic
4、查看某一分组消费情况
./kafka-consumer-groups.sh --bootstrap-server 172.18.111.106:9092 --describe --group kafka_result_id
5、所有分组消费情况
./kafka-consumer-groups.sh --bootstrap-server 172.18.111.106:9092 --describe --all-groups
6、消费某一topic
./kafka-console-consumer.sh --bootstrap-server 172.18.111.106:9092 --topic task_result_topic --from-beginning
7、启动生产客户端
./kafka-console-producer.sh --broker-list 127.0.0.1:9092 --topic kfcs
8、查看某一topic的消费情况
./kafka-topics.sh --bootstrap-server 172.18.111.106:9092 --describe --topic xxxx
9、创建topic
./kafka-topics.sh --zookeeper localhost:2181 --create --topic test --partitions 1 --replication-factor 1