RocketMQ消费者实践

摘要:
RocketMQ已在我们最近的工作中使用。现在我们记录如何正确实现消费。消费者需要注意的问题是,如何防止重复消费,如何快速消费,如何应对消费者失败,以及如何预防重复消费。重复使用会导致数据不一致和其他问题。2) 故障是可控的。如果消息消费失败,它不依赖于mq的重试机制。它可以定期重新运行消费失败消息,或者手动触发重试消费。

  最近工作中用到了RocketMQ,现记录下,如何正确实现消费~

  • 消费者需要注意的问题
  1. 防止重复消费
  2. 如何快速消费
  3. 消费失败如何处理
  • Consumer具体实现
  • 防止重复消费

    重复消费会造成数据不一致等问题。所以,消费者要做到消费幂等

    1)每次消费,记录messageId;如果再次消费该message,查询messageId是否已存在,已存在,就跳过消费;

    2)使用具体业务状态来防止重复消费,例如如果状态已经被变更,说明已有消息被消费;

  • 如何快速消费

    消费过程缓慢,势必会造成消息积压,如何提高消费速度势必比较重要:

    每次接收到消息后,不做处理(具体不一定,最好是简单),直接将消息保存到本地数据库,然后后台异步处理消息,这么做的好处:

    1) 快速消费,如果消费过程比较耗时(大量更新,RPC调用等),可以将消息插入本地,然后后台异步消费,消费完成,更新本地消息状态

               2)失败可控,如果某条消息消费失败,不依赖于mq的重试机制,可以定时重跑消费失败的消息,或者人工触发重试消费。

  • 消费失败如何处理

   消费过程不能保证不出异常,虽然mq消费失败有重试机制,但我们并没有这么做,而是:

    跟上面提到的一样,由于已经把消息存到了本地,消费失败,也不用担心,后台重跑即可~~~~

  如果大家觉得上面说的哪方面有问题,或者有更好的实践,欢迎留言~~~~

免责声明:文章转载自《RocketMQ消费者实践》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇二维矩形装箱问题(2D rectangular packing problem, 简称2DRP)介绍Mac 系统如何利用软链接在根目录创建文件夹?下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

RocketMQ 参数详解

    NameServer配置属性 参数名 参数类型 描述 默认参数(时间为单位ms,数据单位为byte) rocketmqHome String RockerMQ主目录,默认用户主目录   namesrvAddr String NameServer地址   kvConfigPath String kv配置文件路径,包含顺序...

全面解读:微信服务号升级和群发增至4条的应用方法

全面解读:微信服务号升级和群发增至4条的应用方法 摘要:微信公众平台正式公布微信服务号升级的消息,提供高级群发接口,火速华磊初步总结:群发接口的提供意味着企业获得了精准推送的能力、企业获得了每月多次激活粉丝的能力、企业公众号的粉丝活跃度全面提升、公众号的营销核心过程趋于完美。 2014/4/15 21:58分,微信公众平台正式公布微信服务号升级的消息,消...

百度竞价门再跟踪:违规医疗广告数量仍大幅增加

网易科技讯 2月18日消息,网易科技日前收到一份署名为反流氓软件联盟的《百度医疗医药广告统计报告》(以下简称报告),据该调研报告中显示,在百度医疗医药竞价排名广告违规被媒体曝光后,这类广告数量随后有所减少,不过在风波平息后,此类广告数量又大幅增加,并且现在仍有大量违规医疗广告。 医疗类广告数量高达遭曝光时两倍 百度在2008年11月因受到媒体曝光影响...

自己画WinForm 皮肤包括默认控件

好久没来博客园,今天捣鼓到现在就是为了把之前的皮肤控件完善好, 之前也看了很多技术文章,大多数都是自己重写系统控件实现换肤,几乎没有像东日的(IrisSkin)控件一样 添加一个组件 把系统的皮肤全换掉,我曾经也是重写系统的控件,但我就喜欢瞎捣鼓,于是就开始找这方面的资料,苦于没学过底层,对windows窗口 以及消息循环机制不了解,找资料也基本上白搭了许...

c# 事件3

1.什么是事件,使对象或者类具有通知功能的成员。//为了解决字段在外部被滥用,推出了事件 事件的功能能=通知+可选的事件参数(具体的详细信息,包括谁发送了消息,发送的什么消息) 使用:用于对象或者类件的动作协调与信息传递(消息推送) 事件模型(发生,响应模型),事件是工具,不会主动通知别人,被事件的拥有者的内部逻辑触发。 2.事件模型中的5个部分: 事件...

在网上看到这篇文章还不错,OnDrawItem与DrawItem讨论

我在学习中经常遇到要重写DrawItem()的情况,但又有一个WM_DRAWITEM消息,它们是什么样的关系呢。如果我们要重写一个CButton取名为CMyButton,我们可以重写CMyButton的DrawItem()函数来实现我们的 需求,但CMyButton::DrawItem()是在什么时候调用呢?它是在它的宿主类的OnDrawItem()中被调...