大数据全系列 教程
1869个小节阅读:465.1k
目录
JAVA全系列 教程
面向对象的程序设计语言
Python全系列 教程
Python3.x版本,未来主流的版本
人工智能 教程
顺势而为,AI创新未来
大厂算法 教程
算法,程序员自我提升必经之路
C++ 教程
一门通用计算机编程语言
微服务 教程
目前业界流行的框架组合
web前端全系列 教程
通向WEB技术世界的钥匙
大数据全系列 教程
站在云端操控万千数据
AIGC全能工具班
A A
White Night
由于在前面的课程中已经学过数据的采集和ETL,本项目不再赘述,现在我们直接随机生成数据写入到Kafka。
启动Zookeeper集群
xxxxxxxxxx
[root@node2 ~]# zkServer.sh start
[root@node3 ~]# zkServer.sh start
[root@node4 ~]# zkServer.sh start
检查Zookeeper集群
启动kafka集群
xxxxxxxxxx
[root@node2 ~]# kafka.sh start
--------start node2's kafka----------
--------start node3's kafka----------
--------start node4's kafka----------
创建主题traffic_topic
xxxxxxxxxx
[root@node2 ~]# kafka-topics.sh --bootstrap-server node3:9092 --replication-factor 2 --partitions 3 --create --topic traffic-topicA
查看所有主题
xxxxxxxxxx
[root@node2 ~]# kafka-topics.sh --list --bootstrap-server node3:9092
traffic-topic
......
启动kafka生产者CreateDataToKafka
启动Offset Explorer 2.0观察traffic-topic中的数据;或者启动消费者观察traffic-topic的数据。
xxxxxxxxxx
[root@node2 ~]# kafka-console-consumer.sh --bootstrap-server node3:9092 --from-beginning --topic traffic-topic
删除主题重新测试:
xxxxxxxxxx
[root@node2 ~]# kafka-topics.sh --bootstrap-server node3:9092 --delete --topic traffic-topic