解决springboot集成rocketmq关于tag的坑
作者:Z_winyou
springboot集成rocketmq关于tag的坑
新项目使用springboot的若依框架集成rocketmq,选择集成RocketMQTemplate这种方式实现消息的发送和接收。
1.客户端发送代码
此处回调方法里有些业务不用关注,只关心发送方法
@Component public class RocketMqHelper { Logger logger = LoggerFactory.getLogger(RocketMqHelper.class); @Resource private RocketMQTemplate rocketMQTemplate; public void send(ReqMsg msg){ rocketMQTemplate.asyncSend(msg.getMsg().getTopic()+":"+msg.getMsg().getTags(), msg.getMsg(), new SendCallback(){ @Override public void onSuccess(SendResult sendResult) { logger.debug("msgid:{} 发送成功" , sendResult.getMsgId()); logger.debug("发送mq成功后要执行的service: {}",msg.getMsg().getSendAfterMethod()); IsaveSendAfterMqLog saveSendAfterMqLog = SpringUtils.getBean(msg.getMsg().getSendAfterMethod()); saveSendAfterMqLog.saveSendAfterMqLog(new SendAfterLog(msg.getMsg(),sendResult,"0")); } @Override public void onException(Throwable throwable) { logger.error("mq发送异常!{}",throwable.toString()); logger.debug("发送mq失败后执行的service: {}",msg.getMsg().getSendAfterMethod()); //异常描述截取500 length入库 msg.getMsg().putUserProperty("exceptionDesc",throwable.toString()); IsaveSendAfterMqLog saveSendAfterMqLog = SpringUtils.getBean(msg.getMsg().getSendAfterMethod()); saveSendAfterMqLog.saveSendAfterMqLog(new SendAfterLog(msg.getMsg(),"1")); } }); } }
2.服务端监听消息
@Service @RocketMQMessageListener(topic = "${rocketmq.topic}", consumerGroup = "${rocketmq.consumer.group}", selectorExpression="${rocketmq.tags}") public class CbiRocketmqConsumer implements RocketMQListener<CbiMsg> { Logger logger = LoggerFactory.getLogger(CbiRocketmqConsumer.class); @Override public void onMessage(CbiMsg message) { String msgBody = new String(message.getBody()); String serviceName = message.getTags(); logger.info("本次消费服务名称:{}",serviceName); AbSaveReceiveAfter saveReceiveAfter = SpringUtils.getBean(serviceName); saveReceiveAfter.saveReceiveAfter(new RecevieAfterLog(message, Constants.CONSUME_SUCCESS));//默认消费成功 } }
@RocketMQMessageListener这个注解里selectorExpression默认是*,接收topic下全部消息。想动态对tags进行配置。于是利用springboot获取yml配置。写死的时候没有问题,但是改成$表达式配置后怎么都收不到消息,经排查居然是selectorExpression这个不支持配置,会原封的按表达式进入MQ容器初始化。然而注解里面的topic,comsumerGroup都可以正常拿到配置值。
翻源码发现问题所在,项目启动时,在ListenerContainerConfiguration在这个类里初始化mq容器时,对配置进行赋值
private DefaultRocketMQListenerContainer createRocketMQListenerContainer(Object bean, RocketMQMessageListener annotation) { DefaultRocketMQListenerContainer container = new DefaultRocketMQListenerContainer(); container.setNameServer(rocketMQProperties.getNameServer()); container.setTopic(environment.resolvePlaceholders(annotation.topic())); container.setConsumerGroup(environment.resolvePlaceholders (annotation.consumerGroup())); container.setRocketMQMessageListener(annotation); container.setRocketMQListener((RocketMQListener) bean); container.setObjectMapper(objectMapper); return container; }
topic和comsumerGroup都在springboot环境里获取配置值了,唯独selectorExpression这个没有,直接默认注解里的。下面的问题就是需要自己在项目启动,springboot容器起来,但是rocketmq容器未起的时候,动态去改注解里配置的值。然后让Rocketmq启动。
** * 因为RocketMQMessageListener不提供动态配置功能 * springboot初始化后rocket容器初始化前利用反射动态改变 * RocketMQMessageListener注解selectorExpression的值 * * */ @Component public class ChangeSelectorExpressionBeforeMqStart implements InitializingBean { @Value("${rocketmq.consumer.tags}") private String tags; @Override public void afterPropertiesSet() throws Exception { RocketMQMessageListener annoTable = CbiRocketmqConsumer.class.getAnnotation(RocketMQMessageListener.class); // 获取代理处理器 InvocationHandler invocationHandler = Proxy.getInvocationHandler(annoTable); // 获取私有 memberValues 属性 Field f = invocationHandler.getClass().getDeclaredField("memberValues"); f.setAccessible(true); // 获取实例的属性map Map<String, Object> memberValues = (Map<String, Object>) f.get(invocationHandler); // 修改属性值 memberValues.put("selectorExpression", tags); } }
问题解决。。
SpringBoot集成RocketMQ及报错处理
项目场景:
说明:springBoot集成RocketMQ开发
环境:阿里云+Centos8+RocketMQ+SpringBoot+Docker
启动:docker start rmqserver rmqbroker[因为RocketMQ安装在Docket容器中,所以这样启动]
服务器broker.conf配置信息:
brokerIP1=外网ip namesrvAddr=外网ip:9876 brokerName=broker_tanhua autoCreateTopicEnable=true
说明:
1.brokerIP1 当前broker监听的IP
2.Broker是RocketMq的核心,负责消息的传递(提供者=》消费者)以及消息的持久化存储,消息的HA机制以及服务器过滤功能。
3.autoCreateTopicEnable:自动创建Topic路由
问题一描述:
我第一次配置时,broker.conf配置文件中没有配置autoCreateTopicEnable,因此在程序运行时会提示没有路由信息:No route info of this topic: tanhua-sso-login
我发送消息路由名字是tanhua-sso-login
错误信息:
No route info of this topic: tanhua-sso-login
错误信息截图:我没有截图网上找了一个,差不多
解决方式:
我当时也在网上找了很多,有在启动时添加自动创建的也有说防火墙开启的原因,但是我感觉会这个的话应该都知道关防火墙。
在启动时添加自动创建可能也好使,但是我没试过,因为我在搜索时发现问题统一指向说没有自动创建,因此我想的是直接在配置文件中进行修改,然后重启
解决方式:
在broker.conf配置文件中添加如下配置:
autoCreateTopicEnable=true
SpringBoot集成信息:
application.properties:
# RocketMQ相关配置 rocketmq.nameServer=外网IP:9876 rocketmq.producer.group=tanhua rocketmq.producer.send-message-timeout= 6000
【注】:这里配置的开通没有spring,我之前加spring怎么也连接不上
pom.xml:
<!--RocketMQ相关--> <dependency> <groupId>org.apache.rocketmq</groupId> <artifactId>rocketmq-spring-boot-starter</artifactId> <version>2.0.4</version> </dependency> <dependency> <groupId>org.apache.rocketmq</groupId> <artifactId>rocketmq-client</artifactId> <version>4.5.1</version> </dependency> <dependency> <groupId>org.apache.rocketmq</groupId> <artifactId>rocketmq-common</artifactId> <version>4.5.1</version> </dependency>
问题二描述:
我在修改上面的错误后,紧接着又报
错误信息:
RemotingTooMuchRequestException: sendDefaultImpl call timeout
错误信息截图:也是没有截图网上找了一个,差不多
思路:错误信息中提示call timeout,timeout一般想到到时连接或响应超时,因此在网上找到的是在发送MQ时出错,网上解决方案是:修改Mq配置文件中的sendMsgTimeout,因此想到修改可以修改SpringBoot连接MQ时的配置设置
解决方案:添加rocketmq.producer.send-message-timeout= 6000
说明:给大一点发送信息超时时间。
说明:同时在SpringBoot集成RoctetMQ配置中没有sendMsgTimeout因此用rocketmq=>输入'.'=>输入sendtimeout=>查看有哪些关于这个的配置。
完整配置:
# RocketMQ相关配置 rocketmq.nameServer=外网IP:9876 rocketmq.producer.group=tanhua rocketmq.producer.send-message-timeout= 6000
以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。