1 配置文件配置kafka路径

#kafak地址
bootstrap.servers=xx.xxx.xx.xx:端口
#id(可以随便编一个,相当于身份证)
group.id=xxxxx

2 我这里选择配置文件注入



<!-- kafka-->
	<!--1.定义consumer的参数 -->
	<bean id="consumerProperties" class="java.util.HashMap">
		<constructor-arg>
			<map>

				<entry key="bootstrap.servers" value="${bootstrap.servers}" />
				<entry key="group.id" value="${group.id}" />
				<entry key="enable.auto.commit" value="${enable.auto.commit}" />
				<entry key="session.timeout.ms" value="${session.timeout.ms}" />
				<entry key="key.deserializer"
					   value="org.apache.kafka.common.serialization.StringDeserializer" />
				<entry key="value.deserializer"
					   value="org.apache.kafka.common.serialization.StringDeserializer" />
				<entry key="max.poll.interval.ms" value="300000 " />
				<entry key="max.poll.records" value="500 " />
				<entry key="session.time.out" value="10000 " />
				<entry key="heartbeat.interval.ms" value="3000 " />
			</map>
		</constructor-arg>
	</bean>

	<!-- 2.创建consumerFactory bean -->
	<bean id="consumerFactory"
		  class="org.springframework.kafka.core.DefaultKafkaConsumerFactory" >
		<constructor-arg>
			<ref bean="consumerProperties" />
		</constructor-arg>
	</bean>

	<!-- 3.定义消费实现类 -->
	<bean id="kafkaConsumerService" class="com.KafkaRepeater">
		<constructor-arg index="0" ref="这里可以注入你需要写入的实现类" />
	</bean>

	<!-- 4.消费者容器配置信息 -->
	<bean id="containerProperties" class="org.springframework.kafka.listener.config.ContainerProperties">
		<!-- topic -->
		<constructor-arg index="0">
			<list>
				<value>pppppppp</value>
			</list>
		</constructor-arg>
		<property name="messageListener" ref="kafkaConsumerService" />
	</bean>

	<!-- 5.消费者并发消息监听容器,执行doStart()方法 -->
	<bean id="messageListenerContainer" class="org.springframework.kafka.listener.ConcurrentMessageListenerContainer" init-method="doStart" >
		<constructor-arg ref="consumerFactory" />
		<constructor-arg ref="containerProperties" />
		<property name="concurrency" value="${concurrency}" />
	</bean>

<!--	kafka生产者-->
	<!-- 1.参数配置 -->
	<bean id="producerProperties" class="java.util.HashMap">
		<constructor-arg>
			<map>
				<entry key="bootstrap.servers" value="${bootstrap.servers}" />
				<!-- 组id标志 -->
				<entry key="group.id" value="${group.id}" />
				<entry key="retries" value="2" />
				<entry key="enable.idempotence" value="true" />
				<entry key="ack" value="all"/>
				<entry key="batch.size" value="1638" />
				<entry key="linger.ms" value="1" />
				<entry key="buffer.memory" value="33554432 " />
				<entry key="key.serializer"
					   value="org.apache.kafka.common.serialization.StringSerializer" />
				<entry key="value.serializer"
					   value="org.apache.kafka.common.serialization.StringSerializer" />
			</map>
		</constructor-arg>
	</bean>
	<!--  2.创建kafkatemplate需要使用的producerfactory bean  -->
	<bean id="producerFactory"
		  class="org.springframework.kafka.core.DefaultKafkaProducerFactory">
		<constructor-arg>
			<ref bean="producerProperties" />
		</constructor-arg>
	</bean>
	<!--    3.创建kafkatemplate bean,使用的时候,只需要注入这个bean,即可使用template的send消息方法-->
	<bean id="KafkaTemplate"
		  class="org.springframework.kafka.core.KafkaTemplate">
		<constructor-arg ref="producerFactory" />
		<!--设置对应topic -->
		<property name="defaultTopic" value="one1" />
	</bean>
	<!-- 3.定义消费实现类 -->
	<bean id="KafkaProducerService" class="com.KafkaProducer">
		<constructor-arg index="0" ref="这里可以注入你需要写入的实现类(我这里没应用,你可以注掉)" />
	</bean>

3 生产者

@Component
public class KafkaProducer {

    @Resource
    private KafkaTemplate kafkaTemplate;

//要发到哪个topic上
    public void sendJscf(String json) {
        if(json!=null) {
            kafkaTemplate.send("topic", json);
        }
    }

}

4 定义消费者

 
public class KafkaRepeater implements MessageListener<String, String> {



   @Override
    public void onMessage(ConsumerRecord<String, String> data) {
        if ("pppppppp".equals(data.topic())) {
            View limit = JSON.parseObject(data.value(), View.class);
          
        }
    }

}

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐