资讯专栏INFORMATION COLUMN

一起来学SpringBoot | 第十二篇:初探RabbitMQ消息队列

Baoyuan / 3301人阅读

摘要:用于控制活动人数,将超过此一定阀值的订单直接丢弃。缓解短时间的高流量压垮应用。目前比较推荐的就是我们手动然后将消费错误的消息转移到其它的消息队列中,做补偿处理消费者该方案是默认的方式不太推荐。

</>复制代码

  1. SpringBoot 是为了简化 Spring 应用的创建、运行、调试、部署等一系列问题而诞生的产物,自动装配的特性让我们可以更好的关注业务本身而不是外部的XML配置,我们只需遵循规范,引入相关的依赖就可以轻易的搭建出一个 WEB 工程

MQ全称(Message Queue)又名消息队列,是一种异步通讯的中间件。可以将它理解成邮局,发送者将消息传递到邮局,然后由邮局帮我们发送给具体的消息接收者(消费者),具体发送过程与时间我们无需关心,它也不会干扰我进行其它事情。常见的MQ有kafkaactivemqzeromqrabbitmq 等等,各大MQ的对比和优劣势可以自行Google

rabbitmq

RabbitMQ是一个遵循AMQP协议,由面向高并发的erlanng语言开发而成,用在实时的对可靠性要求比较高的消息传递上,支持多种语言客户端。支持延迟队列(这是一个非常有用的功能)....

基础概念

Broker:简单来说就是消息队列服务器实体
Exchange:消息交换机,它指定消息按什么规则,路由到哪个队列
Queue:消息队列载体,每个消息都会被投入到一个或多个队列
Binding:绑定,它的作用就是把exchangequeue按照路由规则绑定起来
Routing Key:路由关键字,exchange根据这个关键字进行消息投递
vhost:虚拟主机,一个broker里可以开设多个vhost,用作不同用户的权限分离
producer:消息生产者,就是投递消息的程序
consumer:消息消费者,就是接受消息的程序
channel:消息通道,在客户端的每个连接里,可建立多个channel,每个channel代表一个会话任务

基于Centos7.x安装请参考: http://blog.battcn.com/2017/08/20/linux/linux-centos7-ribbitmq/

常见应用场景

邮箱发送:用户注册后投递消息到rabbitmq中,由消息的消费方异步的发送邮件,提升系统响应速度

流量削峰:一般在秒杀活动中应用广泛,秒杀会因为流量过大,导致应用挂掉,为了解决这个问题,一般在应用前端加入消息队列。用于控制活动人数,将超过此一定阀值的订单直接丢弃。缓解短时间的高流量压垮应用。

订单超时:利用rabbitmq的延迟队列,可以很简单的实现订单超时的功能,比如用户在下单后30分钟未支付取消订单

还有更多应用场景就不一一列举了.....

导入依赖

pom.xml 中添加 spring-boot-starter-amqp的依赖

</>复制代码

  1. org.springframework.boot
  2. spring-boot-starter-amqp
  3. com.alibaba
  4. fastjson
  5. 1.2.46
  6. org.springframework.boot
  7. spring-boot-starter-web
  8. org.springframework.boot
  9. spring-boot-starter-test
  10. test
属性配置

application.properties 文件中配置rabbitmq相关内容,值得注意的是这里配置了手动ACK的开关

</>复制代码

  1. spring.rabbitmq.username=battcn
  2. spring.rabbitmq.password=battcn
  3. spring.rabbitmq.host=192.168.0.133
  4. spring.rabbitmq.port=5672
  5. spring.rabbitmq.virtual-host=/
  6. # 手动ACK 不开启自动ACK模式,目的是防止报错后未正确处理消息丢失 默认 为 none
  7. spring.rabbitmq.listener.simple.acknowledge-mode=manual
具体编码 定义队列

如果手动创建过或者RabbitMQ中已经存在该队列那么也可以省略下述代码...

</>复制代码

  1. package com.battcn.config;
  2. import org.springframework.amqp.core.Queue;
  3. import org.springframework.context.annotation.Bean;
  4. import org.springframework.context.annotation.Configuration;
  5. /**
  6. * RabbitMQ配置
  7. *
  8. * @author Levin
  9. * @since 2018/4/11 0011
  10. */
  11. @Configuration
  12. public class RabbitConfig {
  13. public static final String DEFAULT_BOOK_QUEUE = "dev.book.register.default.queue";
  14. public static final String MANUAL_BOOK_QUEUE = "dev.book.register.manual.queue";
  15. @Bean
  16. public Queue defaultBookQueue() {
  17. // 第一个是 QUEUE 的名字,第二个是消息是否需要持久化处理
  18. return new Queue(DEFAULT_BOOK_QUEUE, true);
  19. }
  20. @Bean
  21. public Queue manualBookQueue() {
  22. // 第一个是 QUEUE 的名字,第二个是消息是否需要持久化处理
  23. return new Queue(MANUAL_BOOK_QUEUE, true);
  24. }
  25. }
实体类

创建一个User

</>复制代码

  1. public class Book implements java.io.Serializable {
  2. private static final long serialVersionUID = -2164058270260403154L;
  3. private String id;
  4. private String name;
  5. // 省略get set ...
  6. }
控制器

编写一个Controller类,用于消息发送工作

</>复制代码

  1. package com.battcn.controller;
  2. import com.battcn.config.RabbitConfig;
  3. import com.battcn.entity.Book;
  4. import com.battcn.handler.BookHandler;
  5. import org.springframework.amqp.rabbit.core.RabbitTemplate;
  6. import org.springframework.beans.factory.annotation.Autowired;
  7. import org.springframework.web.bind.annotation.GetMapping;
  8. import org.springframework.web.bind.annotation.RequestMapping;
  9. import org.springframework.web.bind.annotation.RestController;
  10. /**
  11. * @author Levin
  12. * @since 2018/4/2 0002
  13. */
  14. @RestController
  15. @RequestMapping(value = "/books")
  16. public class BookController {
  17. private final RabbitTemplate rabbitTemplate;
  18. @Autowired
  19. public BookController(RabbitTemplate rabbitTemplate) {
  20. this.rabbitTemplate = rabbitTemplate;
  21. }
  22. /**
  23. * this.rabbitTemplate.convertAndSend(RabbitConfig.DEFAULT_BOOK_QUEUE, book); 对应 {@link BookHandler#listenerAutoAck}
  24. * this.rabbitTemplate.convertAndSend(RabbitConfig.MANUAL_BOOK_QUEUE, book); 对应 {@link BookHandler#listenerManualAck}
  25. */
  26. @GetMapping
  27. public void defaultMessage() {
  28. Book book = new Book();
  29. book.setId("1");
  30. book.setName("一起来学Spring Boot");
  31. this.rabbitTemplate.convertAndSend(RabbitConfig.DEFAULT_BOOK_QUEUE, book);
  32. this.rabbitTemplate.convertAndSend(RabbitConfig.MANUAL_BOOK_QUEUE, book);
  33. }
  34. }
消息消费者

默认情况下 spring-boot-data-amqp 是自动ACK机制,就意味着 MQ 会在消息消费完毕后自动帮我们去ACK,这样依赖就存在这样一个问题:如果报错了,消息不会丢失,会无限循环消费,很容易就吧磁盘空间耗完,虽然可以配置消费的次数但这种做法也有失优雅。目前比较推荐的就是我们手动ACK然后将消费错误的消息转移到其它的消息队列中,做补偿处理

</>复制代码

  1. package com.battcn.handler;
  2. import com.battcn.config.RabbitConfig;
  3. import com.battcn.entity.Book;
  4. import com.rabbitmq.client.Channel;
  5. import org.slf4j.Logger;
  6. import org.slf4j.LoggerFactory;
  7. import org.springframework.amqp.core.Message;
  8. import org.springframework.amqp.rabbit.annotation.RabbitListener;
  9. import org.springframework.stereotype.Component;
  10. import java.io.IOException;
  11. /**
  12. * BOOK_QUEUE 消费者
  13. *
  14. * @author Levin
  15. * @since 2018/4/11 0011
  16. */
  17. @Component
  18. public class BookHandler {
  19. private static final Logger log = LoggerFactory.getLogger(BookHandler.class);
  20. /**
  21. *

    TODO 该方案是 spring-boot-data-amqp 默认的方式,不太推荐。具体推荐使用 listenerManualAck()

  22. * 默认情况下,如果没有配置手动ACK, 那么Spring Data AMQP 会在消息消费完毕后自动帮我们去ACK
  23. * 存在问题:如果报错了,消息不会丢失,但是会无限循环消费,一直报错,如果开启了错误日志很容易就吧磁盘空间耗完
  24. * 解决方案:手动ACK,或者try-catch 然后在 catch 里面讲错误的消息转移到其它的系列中去
  25. * spring.rabbitmq.listener.simple.acknowledge-mode=manual
  26. *

  27. *
  28. * @param book 监听的内容
  29. */
  30. @RabbitListener(queues = {RabbitConfig.DEFAULT_BOOK_QUEUE})
  31. public void listenerAutoAck(Book book, Message message, Channel channel) {
  32. // TODO 如果手动ACK,消息会被监听消费,但是消息在队列中依旧存在,如果 未配置 acknowledge-mode 默认是会在消费完毕后自动ACK掉
  33. final long deliveryTag = message.getMessageProperties().getDeliveryTag();
  34. try {
  35. log.info("[listenerAutoAck 监听的消息] - [{}]", book.toString());
  36. // TODO 通知 MQ 消息已被成功消费,可以ACK了
  37. channel.basicAck(deliveryTag, false);
  38. } catch (IOException e) {
  39. try {
  40. // TODO 处理失败,重新压入MQ
  41. channel.basicRecover();
  42. } catch (IOException e1) {
  43. e1.printStackTrace();
  44. }
  45. }
  46. }
  47. @RabbitListener(queues = {RabbitConfig.MANUAL_BOOK_QUEUE})
  48. public void listenerManualAck(Book book, Message message, Channel channel) {
  49. log.info("[listenerManualAck 监听的消息] - [{}]", book.toString());
  50. try {
  51. // TODO 通知 MQ 消息已被成功消费,可以ACK了
  52. channel.basicAck(message.getMessageProperties().getDeliveryTag(), false);
  53. } catch (IOException e) {
  54. // TODO 如果报错了,那么我们可以进行容错处理,比如转移当前消息进入其它队列
  55. }
  56. }
  57. }

主函数

</>复制代码

  1. package com.battcn;
  2. import org.springframework.boot.SpringApplication;
  3. import org.springframework.boot.autoconfigure.SpringBootApplication;
  4. /**
  5. * @author Levin
  6. */
  7. @SpringBootApplication
  8. public class Chapter11Application {
  9. public static void main(String[] args) {
  10. SpringApplication.run(Chapter11Application.class, args);
  11. }
  12. }
测试

完成准备事项后,启动Chapter11Application 访问 http://localhost:8080/books 将会看到如下内容,就代表一切正常....

</>复制代码

  1. 2018-05-22 19:04:26.708 INFO 23752 --- [cTaskExecutor-1] com.battcn.handler.BookHandler : [listenerAutoAck 监听的消息] - [com.battcn.entity.Book@77d8be18]
  2. 2018-05-22 19:04:26.709 INFO 23752 --- [cTaskExecutor-1] com.battcn.handler.BookHandler : [listenerManualAck 监听的消息] - [com.battcn.entity.Book@8bb452]
总结

目前很多大佬都写过关于 SpringBoot 的教程了,如有雷同,请多多包涵,本教程基于最新的 spring-boot-starter-parent:2.0.2.RELEASE编写,包括新版本的特性都会一起介绍...

说点什么

个人QQ:1837307557

battcn开源群(适合新手):391619659

微信公众号(欢迎调戏):battcn

个人博客:http://blog.battcn.com/

全文代码:https://github.com/battcn/spring-boot2-learning/tree/master/chapter11

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/71357.html

相关文章

  • 起来SpringBoot | 第十三篇:RabbitMQ延迟队列

    摘要:另一种就是用中的位于包下,本质是由和实现的阻塞优先级队列。表明了一条消息可在队列中存活的最大时间。当某条消息被设置了或者当某条消息进入了设置了的队列时,这条消息会在时间后死亡成为。 SpringBoot 是为了简化 Spring 应用的创建、运行、调试、部署等一系列问题而诞生的产物,自动装配的特性让我们可以更好的关注业务本身而不是外部的XML配置,我们只需遵循规范,引入相关的依赖就可...

    selfimpr 评论0 收藏0
  • SpringBoot非官方教程 | 第十二篇springboot集成apidoc

    摘要:首先声明下,是基于注释来生成文档的,它不基于任何框架,而且支持大多数编程语言,为了系列的完整性,所以标了个题。二准备工作安装完安装它的项目源码。输命令输入目录输出目录是我的工程名。 首先声明下,apidoc是基于注释来生成文档的,它不基于任何框架,而且支持大多数编程语言,为了springboot系列的完整性,所以标了个题。 一、apidoc简介 apidoc通过在你代码的注释来生成ap...

    xiaoxiaozi 评论0 收藏0
  • SpringBoot非官方教程 | 第十五篇:Springboot整合RabbitMQ

    摘要:创建消息监听,并发送一条消息在程序中,提供了发送消息和接收消息的所有方法。 这篇文章带你了解怎么整合RabbitMQ服务器,并且通过它怎么去发送和接收消息。我将构建一个springboot工程,通过RabbitTemplate去通过MessageListenerAdapter去订阅一个POJO类型的消息。 准备工作 15min IDEA maven 3.0 在开始构建项目之前,机器需...

    HollisChuang 评论0 收藏0
  • SpringBoot RocketMQ 整合使用和监控

    摘要:前提通过前面两篇文章可以简单的了解和安装,今天就将和整合起来使用。然后我运行之前的整合项目,查看监控信息如下总结整篇文章讲述了与整合和监控平台的搭建。 showImg(https://segmentfault.com/img/remote/1460000013232432?w=1920&h=1277); 前提 通过前面两篇文章可以简单的了解 RocketMQ 和 安装 RocketMQ...

    Jacendfeng 评论0 收藏0

发表评论

0条评论

Baoyuan

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<