项目描述

本项目是个简单的kafka集群简单生产者和消费者实例,生产者能生产消息,消费者能消费消息,这里将消费的消息存入了mysql数据库,适合刚kafka刚入门的朋友借鉴使用,里面的zookeeper集群和kafka集群的地址需要修改为自己的。

运行环境

jdk1.8+mysql+linux+zookeeper集群+kafka集群

支持windows下集群

项目技术(必填)

java+maven+log4j

jar包文件

链接:https://pan.baidu.com/s/1-PfrSjoGPP3WPtoP-wBpTw

提取码:yuvg

数据库文件

链接:https://pan.baidu.com/s/1e1kh8Dkqe7oz43OHR5YEEg

提取码:y9u9

项目截图(必填)

5f44669d9023f819b9cfa4031178418d.png

5f44669d9023f819b9cfa4031178418d.png

5f44669d9023f819b9cfa4031178418d.png

5f44669d9023f819b9cfa4031178418d.png

运行截图(必填)

先启动Main在启动ConsumerMain

这是查看的运行日志

5f44669d9023f819b9cfa4031178418d.png

windows下目录在项目同一个磁盘目录的D:\kafkaProjects\logs

5f44669d9023f819b9cfa4031178418d.png

5f44669d9023f819b9cfa4031178418d.png

控制台日志同上面的文件日志

生产者日志

5f44669d9023f819b9cfa4031178418d.png

消费者日志

5f44669d9023f819b9cfa4031178418d.png

注意事项

1.注意修改自己的集群地址以及消费者消费消息存入数据库地址

2.数据库保存消息跑出如下异常

5f44669d9023f819b9cfa4031178418d.png

需要加private static final String URL = "jdbc:mysql://127.0.0.1:3306/kafka_demo?serverTimezone=UTC";

5f44669d9023f819b9cfa4031178418d.png

3.如果zookeeper和kafka是单个实例,不集群,则修改ProducerUtil.java和ConsumerUtil.java

5f44669d9023f819b9cfa4031178418d.png

5f44669d9023f819b9cfa4031178418d.png

4.必须先启动zookeeper和kafka

cd D:\kafka_2.12-2.3.0\bin\windows\

zookeeper-server-start.bat ..\..\config\zookeeper.properties

5f44669d9023f819b9cfa4031178418d.png

cd D:\kafka_2.12-2.3.0\bin\windows\

kafka-server-start.bat ..\..\config\server.properties

5f44669d9023f819b9cfa4031178418d.png

windows下如何启动kafka请参考https://www.jianshu.com/p/ce203d4e2f41

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐