当前位置: 首页 > news >正文

营销网站的优势有哪些泉州品牌网站设计定制

营销网站的优势有哪些,泉州品牌网站设计定制,wordpress修改自豪地采用,wordpress同步社交目录 一、哪些场景需要消息保序?二、如何实现消息保序?三、保序消息的常见问题和应对策略3.1、重复消息3.2、节点故障3.3、分区扩容四、小结本文来源:极客时间vip课程笔记 一、哪些场景需要消息保序? 消息保序问题指的是,在通过消息中间件传递消息过程中,我们希望消费者收…

目录

    • 一、哪些场景需要消息保序?
    • 二、如何实现消息保序?
    • 三、保序消息的常见问题和应对策略
      • 3.1、重复消息
      • 3.2、节点故障
      • 3.3、分区扩容
    • 四、小结

本文来源:极客时间vip课程笔记

一、哪些场景需要消息保序?

  • 消息保序问题指的是,在通过消息中间件传递消息过程中,我们希望消费者收到消息的顺序,和发送者发送消息的顺序保持一致。或者说,消息中间件在传递消息时,不要改变消息之间的顺序。
  • 过在工程实践中,我们面临的保序问题不一定只是局限在消息保序这一个环节,更常见的场景是,事件经过包含消息队列等多个环节的处理和传递后,在某个服务内能够按照事件发生的顺序来逐个处理这些事件,不发生乱序。比如:
    (1)、在证券、股票交易撮合场景中,对于出价相同的交易单,需要坚持按照先出价先交易的原则,下游处理订单的系统需要严格按照出价顺序来处理订单。
    (2)、在数据库变更增量同步场景中,上游源端数据库按需执行增删改操作,将 BINLOG 作为消息,通过消息队列传输到下游系统,下游系统按顺序还原消息数据,实现状态数据有序更新。
    (3)、在电商系统中,订单创建、支付、退款、物流等消息需要按照顺序处理,才能保证订单状态的正确更新。

二、如何实现消息保序?

  • 有些消息队列其设计就是基于队列来实现的,比如 RabbitMQ。

  • 我们知道队列的特性就是先进先出,天然就是有序的,使用这种“基于队列来实现的消息队列”传递消息,自然就可以实现消息保序。

  • 但是为了实现高吞吐,更多的消息队列在设计上采用的是多分区或多队列的实现,比如 Kafka 或 RocketMQ 。这些消息队列在处理消息时,会将消息按照一定的策略分发到多个分区上并行处理,也就无法保证消息的有序性了。

    如果我们希望在多分区的消息队列上实现消息保序,可以将分区数量配置为 1,这样就可以实现和单队列消息中间件一样的保序效果了。

  • 此外,为了保证在消费者端消息的有序性,消费者也只能单实例单线程来消费消息,才能保证全流程消息是严格有序的。

  • 以上就是全局消息保序的实现方法,这种方法的实现思路其实就是全局串行处理。我们知道,串行处理有一个很大的弊端,那就是消息吞吐量有限,也没法通过水平扩展来提升消息吞吐量。在规模比较大的场景下就显得力不从心了。

  • 我们会发现,大多数需要消息保序的场景并不需要消息“全局有序”。多数场景下,我们只需要保证有业务关系的消息之间的顺序就可以了,没有业务关系的消息之间的先后顺序,其实是无所谓的。

  • 只有数据库 BINLOG 同步这个场景,因为数据库事务的存在,我们没有办法把 BINLOG 归并到数据库表上,也就无法判断 BINLOG 消息的关联性,这种情况下必须实现全局保序,才能保证数据同步的正确性。

    将保序要求从全局放宽到局部,就可以充分利用多分区消息队列的并发能力来提升消息吞吐量了。

  • 实现的思路是这样的,既然我们只需要保证有关联的消息之间的顺序,那么只要把关联的消息都发送给同一个分区处理,而分区内天然就可以保证消息的处理顺序,这样就实现了消息局部保序。下面举个例子来说明。

  • 比如,我们用一个 4 分区的主题来处理订单消息。可以采用哈希算法将订单消息按照订单号的后两位均匀地分配到 4 个分区上。

  • 也就是,将订单尾号 00-24 的订单发给 0 号分区,25-49 尾号的订单分给 1 号分区,50-74 尾号的订单发给 2 号分区,剩余的发给 3 号分区。这样就可以保证同一个订单的消息总是分配相同的分区,也就实现了订单内消息保序。

  • 多数消息中间件都内置了相应的功能来帮助我们快速实现局部消息保序。

  • 以 Kafka 为例,Kafka 的 API 支持在发送消息的时候指定一个消息的 Key,并且内置了默认的哈希算法将 Key 映射到主题的分区上,保证具有相同 Key 的消息总是会被发送到同一分区,从而实现了消息局部保序。在上面例子中,可以直接使用订单号作为消息的 Key,示例代码如下:

    // 订单消息
    OrderMessage orderMessage = createOrderMessage(...);
    // 订单号,作为Key
    String orderId = orderMessage.getOrderId();
http://www.yayakq.cn/news/978630/

相关文章:

  • 网站建设师百度百科郑州东站附近网站建设公司
  • php旅游网站开发小结嘉定做网站
  • 住房城乡建设管理网站国外设计师作品网站
  • 庙行网站建设WordPress建影视站
  • 哪有做网站公司哪个软件制作视频比较好
  • 单产品网站模板如何做汽车团购网站
  • 深圳网站建设网络推广可以分为( )
  • 聊城高端网站设计建设制作自己的平台网站
  • 自己做的网站很卡印刷做网站网上接单
  • 网站cdn自己做html 门户网站模板
  • 西宁做网站多少钱百度编辑器wordpress
  • 湘潭网站建设 w磐石网络工作准备区域的组成包括
  • 网站开发主要使用的技术网站什么时候做负载均衡
  • 网站开发职业认知小结昆明网红打卡景点
  • 品牌创意网站建设电子商务网站规划与建设的论文
  • 阿里巴巴官网国际站深圳网站建设公司地图
  • 做个个人网站多少钱买了服务器主机这么做网站
  • 国家建设部建筑业网站wordpress 只有英文版
  • 最新章节 第一百四十七章 做视频网站wordpress搜索 文章
  • 淘宝代码网站有哪些平面设计和室内设计的区别
  • 实验室网站建设天津做网站.都找津坤科技
  • 佛山门户网站建设公司注册公司费用跟后期费用
  • 网站自己做中国商业企业网
  • 新网站 百度推广无忧网站建设价格
  • 校园网站的建设作用高德地图怎么导航环线
  • iis网站属性最好的国际贸易网站
  • wordpress 多个子站点建设实业公司网站设计模板
  • 专做茶叶的网站项目计划书模板免费
  • 网站内部链接优化方法wordpress主题dux 5.0
  • 做养生的网站多吗矿泉水软文广告500字