启动hdfs kafka zookeeper fuflume指令

技术标签: 启动hdfs kafka zookeeper fuflume指令

#启动hdfs kafka zookeeper fuflume producer consumer指令

##hdfs启动
start-dfs.sh
在这里插入图片描述
##启动zookeeper
./zkmanager.sh start
在这里插入图片描述
## 启动kafka
cd apps/kafka_2.12-2.2.0/bin/
./kafka-server-start.sh …/config/server.properties
在这里插入图片描述

##启动flume
cd apps/flume-1.8.0/bin/
./flume-ng agent -C …/conf/ -f …/dir-hdfs.conf -n ag1 -Dflume.root.logger=INFO.console
(这个跟踪的是下沉到hdfs中的)
./flume-ng agent -C …/conf/ -f …/dir-kafka.conf -n a1 -Dflume.root.logger=INFO.console
(这个跟踪的是下沉到kafka中的)

在这里插入图片描述

kafka 创建主题
./kafka-topics.sh --create --zookeeper hadoop01:2181,hadoop02:2181,hadoop03:2181 --replication-factor 1 --partitions 1 --topic test

在这里插入图片描述
//可以通过zk验证
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
kafka中创建生产者
./kafka-console-producer.sh --broker-list hadoop01:9092,hadoop02:9092,hadoop03:9092 --topic test
在这里插入图片描述
//消费消息
./kafka-console-consumer.sh --bootstrap-server hadoop01:9092,hadoop02:9092,hadoop03:9092 --topic test --from-beginning
在这里插入图片描述
//删除主题

./kafka-topics.sh --delete --zookeeper hadoop01:2181,hadoop02:2181,hadoop03:2181 --topic test2
在这里插入图片描述
//查看描述
./kafka-topics.sh --describe --zookeeper hadoop01:2181,hadoop02:2181,hadoop03:2181 --topic test
在这里插入图片描述

版权声明:本文为博主原创文章,遵循版权协议,转载请附上原文出处链接和本声明。
本文链接:
幸运飞艇官网 秒速快3 幸运赛车 幸运飞艇官网 极速快乐8 秒速时时彩 秒速时时彩 澳洲幸运10开奖结果 北京赛车 澳洲幸运8