RabbitMQ架构设计原理

立山  金牌会员 | 2024-7-18 23:55:34 | 显示全部楼层 | 阅读模式
打印 上一主题 下一主题

主题 938|帖子 938|积分 2814

目次
消息中心件
"异步" 和 "同步"
解耦:
“异步解耦”
流量削峰:
传统的http哀求有诸多缺点:
举例说明:
代码演示:
解决措施:
1、多线程处理惩罚业务逻辑(实现异步操作):
2、Mq处理惩罚业务逻辑(实现异步操作):
MQ实现的两个版本:
1、没有网络的情况下实现MQ :利用多线程制造生产者和消耗者
2、基于网络通讯版本mq netty实现
Mq与多线程之间区别:
Mq消息中心件名词


消息中心件

消息中心件基于队列模型实现异步/同步传输数据
作用:可以实现支撑高并发、异步解耦、流量削峰、降低耦合度。
"异步" 和 "同步"

通常指的是数据发送(生产)和消耗(处理惩罚)的方式。


解耦:

解耦意味着将原本紧密关联或相互依靠的组件、功能或体系分离,使它们可以或许独立地运行、修改和扩展,而不必要影响其他部分。
在进程或线程中,解耦可以使得多步调的操作并行执行,而不是串行执行,从而提高效率。例如,在一个下载和解析的场景中,下载和解析函数可以放在进程池或线程池中并行运行,谁先下载完就先解析,从而实现解耦。
“异步解耦”

可以理解为在并发编程或体系设计中,通过异步处理惩罚的方式实现体系组件或功能之间的解耦,使得它们可以或许并行运行、独立扩展,并且不会相互阻塞或依靠。
流量削峰:

流量削峰是指通过一些技术手段来减弱瞬时的哀求高峰,使体系吞吐量在高峰哀求下保持可控

传统的http哀求有诸多缺点:

1.在高并发的情况下,发送大量的哀求到达服务器端导致服务器端处理惩罚哀求堆积。
2.Tomcat服务器处理惩罚每个哀求都有自己独立的线程,如果凌驾最大线程数,会将该哀求缓存到队列中,哀求堆积过多的情况下,可能导致tomcat服务器崩溃
所以一样平常都会在nginx入口实现限流,整合服务掩护框架。
3. http哀求处理惩罚业务逻辑比力耗时,容易造成客户端不停等待,阻塞等待过程中会导致客户端超时重发,引发幂等性问题。
留意事项:接口是为http协议的情况下,最好不要处理惩罚比力耗时的业务逻辑,耗时的业务逻辑应该单独交给多线程或者是mq处理惩罚。
举例说明:


客户端发送哀求到达服务器端,服务器端实现会员注册业务逻辑,
1.insertMember() --插入会员数据  1s
2.sendSms()----发送登岸短信提醒 3s
3.sendCoupons()----发送新人优惠券  3s
总共响应必要7s时间,可能会导致客户端阻塞7s时间,对用户体验不是很好。
代码演示:

  1. import org.springframework.web.bind.annotation.RequestMapping;
  2. import org.springframework.web.bind.annotation.RestController;
  3. @RestController
  4. public class MemberService {
  5.     //@Autowired
  6.     //public MemberServiceAsync memberServiceAsync;
  7.     //@Bean
  8.     @RequestMapping("/addMember")
  9.     public  String addMember(){
  10.         //1.数据库插入数据 log.info(">01<");
  11.         System.out.println(">01<");
  12.         sms();
  13.         System.out.println(">04<");
  14.         return "用户注册成功!!";
  15.     }
  16.     public String sms(){
  17.         System.out.println(">02<");
  18.         try{
  19.             System.out.println(">正在发送短信<");
  20.             Thread.sleep(3000);
  21.         }catch(Exception e){
  22.             e.printStackTrace();
  23.         }
  24.         System.out.println(">03<");
  25.         return "短信发送完成!";
  26.     }
  27. }
复制代码
解决措施:

多线程MQ方式实现异步
小项目可用多线程实现异步,大项目必要利用MQ,由于多线程面临高并发会对CPU造成损耗
1、多线程处理惩罚业务逻辑(实现异步操作):


用户向数据库中插入一条数据之后,在单独开启一个线程异步发送短信和优惠操作。客户端只必要等待1s时间
优点:适合于小项目 实现异步
缺点:有可能会消耗服务器cpu资源资源
代码演示:

异步类:

主配置类加注解:

  1. import org.springframework.scheduling.annotation.Async;
  2. import org.springframework.stereotype.Component;
  3. //异步类实现sms方法
  4. @Component
  5. public class MemberServiceAsync
  6. {
  7.     @Async
  8.     public String sms(){
  9.         System.out.println(">02<");
  10.         System.out.println(">正在发送短信<");
  11.         try {
  12.             Thread.sleep(3000);
  13.         } catch (InterruptedException e) {
  14.             e.printStackTrace();
  15.         }
  16.         System.out.println(">03<");
  17.         return "短信发送完成!!";
  18.     }
  19. }
复制代码
解析:@Async的作用是什么
它用于声明一个方法是异步的。
当你在一个方法上利用了 @Async 注解,并正确配置了相关的异步支持,那么该方法将不会在主线程中同步执行,而是会由 Spring 的使命调度器(通常是一个线程池)异步地执行。
配置异步支持通过在配置类上添加 @EnableAsync 注解或在 XML 配置中添加 来实现。
2、Mq处理惩罚业务逻辑(实现异步操作):


当生产者一操作数据库存储数据,就会给消息中心件发送一个msg的提示消息。消息中心件的消息第一次发送给消耗者时,会判断有没有消耗者的存在,如果有,消耗者会主动去消息队列里拉取消息。之后只要消耗者存在,服务端(消息中心件)就属于将消息推送给消耗端。

MQ实现的两个版本:

1、没有网络的情况下实现MQ :利用多线程制造生产者和消耗者

手撕代码:
  1. package com.qcby.async;
  2. import org.json.JSONObject;
  3. import java.util.concurrent.LinkedBlockingDeque;
  4. /**
  5. * 没有网络的情况下实现MQ
  6. * 利用多线程制造生产者和消费者
  7. */
  8. public class BoyatopThreadMQ {
  9.     //MQ服务器 初始化消息的队列
  10.     private static LinkedBlockingDeque<JSONObject> msgs=new LinkedBlockingDeque();
  11.     //主函数  程序入口
  12.     public static void main(String[] args) {
  13.         //生产者  生产线程
  14.         Thread producerThread = new Thread(new Runnable() {
  15.             @Override
  16.             public void run() {
  17.                 try {
  18.                     while(true){
  19.                         Thread.sleep(1000);
  20.                         JSONObject data = new JSONObject();
  21.                         data.put("userId","12345");
  22.                         //存入消息队列
  23.                         msgs.offer(data);
  24.                     }
  25.                 } catch (Exception e) {
  26.                     e.printStackTrace();
  27.                 }
  28.             }
  29.         },"生产者");
  30.         producerThread.start();
  31.         //消费端  消费线程
  32.         Thread consumerThread = new Thread(new Runnable() {
  33.             @Override
  34.             public void run() {
  35.                 try {
  36.                     while(true){
  37.                         JSONObject data = msgs.poll();
  38.                         if(data != null){
  39.                             System.out.println(Thread.currentThread().getName() + ",获取到数据:" + data);
  40.                         }
  41.                     }
  42.                 } catch (Exception e) {
  43.                     e.printStackTrace();
  44.                 }
  45.             }
  46.         },"消费者");
  47.         consumerThread.start();
  48.     }
  49. }
复制代码
2、基于网络通讯版本mq netty实现



解释:
消耗者netty客户端与nettyServer端MQ服务器端保持长连接,MQ服务器端保存消耗者连接。
生产者netty客户端发送哀求给nettyServer端MQ服务器端,MQ服务器端在将该消息内容发送给消耗者。

生产者投递消息给MQ服务器端,MQ服务器端必要缓存该消息。
如果mq服务器端宕机之后,消息如何保证不丢失?
答:持久化机制,会在磁盘中存储一份

如果mq接收到生产者投递消息,如果消耗者不在的情况下,该消息是否会丢失?
答:不会丢失,由于有消息确认机制,必须要消耗者消耗该消息成功之后,再通知给mq服务器端删除该消息。
(mq与消耗者之间的信息通报:先拉取,建立长连接,后推送)

对于多个消耗者,如果没有主题(或者在一个主题里面)会不会消耗同一条消息?
答:不会,每一个消耗者消耗完之后,会告诉MQ:消耗完毕,可以删除,消息确认机制会避免重复性消耗 同组消耗者不会出现重复性消耗的情况,由于有消息确认机制

Mq如何实现抗高并发头脑?
答:Mq消耗者根据自身能力情况 ,拉取mq服务器端消息消耗。默认的情况下是取出一条消息。
缺点:1、存在耽误的问题 2、必要考虑mq消耗者提高速率的问题
如何消耗者提高速率?
答:消耗者实现集群、消耗者批量获取消息即可。

Mq与多线程之间区别:

MQ可以实现异步/解耦/流量削峰问题;
多线程也可以实现异步,但是消耗到cpu资源,没有实现解耦。

Mq消息中心件名词

Producer 生产者:投递消息到MQ服务器端;
Consumer 消耗者:从MQ服务器端获取消息处理惩罚业务逻辑;
Broker MQ服务器端 :
Topic 主题:分类业务逻辑发送短信主题、发送优惠券主题
Queue 存放消息模型队列: 先进先出 后进后出原则 数组/链表
Message  生产者投递消息报文:json 举例: body:{"msg":{"userId":"123456","age":"23"},"type":"producer",”topic”:””}

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
回复

使用道具 举报

0 个回复

正序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

立山

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表