目录
一、什么是MQ
1、应用解耦
2、流量削峰
3、数据分发
二、MQ的优缺点
三、各种MQ产品的对比
四、RocketMQ快速入门(单机版本)
一、什么是MQ
在学习RocketMQ之前,我们先来了解什么是MQ,以及为什么要用MQ。MQ的英文全称是(Massage Queue),它是一种“先进先出”的数据结构。
它主要的应用场景有:
1、应用解耦
系统的耦合性越高,容错性就越低。以电商应用为例,用户创建订单后,如果耦合调用库存系统、物流系统、支付系统,任何一个子系统出了故障或者因为升级等原因暂时不可用,都会造成下单操作异常,影响用户使用体验。
使用消息队列解耦合,系统的耦合性就会提高了。比如物流系统发生故障,需要几分钟才能来修复,在这段时间内,物流系统要处理的数据被缓存到消息队列中,用户的下单操作正常完成。当物流系统回复后,补充处理存在消息队列中的订单消息即可,终端系统感知不到物流系统发生过几分钟故障。
2、流量削峰
应用系统如果遇到系统请求流量的瞬间猛增,有可能会将系统压垮。有了消息队列可以将大量请求缓存起来,分散到很长一段时间处理,这样可以大大提高系统的稳定性和用户体验。
3、数据分发
通过消息队列可以让数据在多个系统更加之间进行流通。数据的产生方不需要关心谁来使用数据,只需要将数据发送到消息队列,数据使用方直接在消息队列中直接获取数据即可
二、MQ的优缺点
优点:解耦、削峰、数据分发
缺点包含以下几点:
1、系统可用性降低
系统引入的外部依赖越多,系统稳定性越差。一旦MQ宕机,就会对业务造成影响。如何保证MQ的高可用?
2、系统复杂度提高
MQ的加入大大增加了系统的复杂度,以前系统间是同步的远程调用,现在是通过MQ进行异步调用。如何保证消息没有被重复消费?怎么处理消息丢失情况?那么保证消息传递的顺序性?
3、一致性问题
A系统处理完业务,通过MQ给B、C、D三个系统发消息数据,如果B系统、C系统处理成功,D系统处理失败。如何保证消息数据处理的一致性?
三、各种MQ产品的对比
目前市面上主流的MQ产品包括kafka、ActiveMQ、RocketMQ、RabbitMQ,相应比较信息如下:
四、RocketMQ快速入门(单机版本)
RocketMQ是阿里巴巴2016年MQ中间件,使用Java语言开发,在阿里内部,RocketMQ承接了例如“双11”等高并发场景的消息流转,能够处理万亿级别的消息。
1、 下载RocketMQ
示例版本官方下载地址:
https://www.apache.org/dyn/closer.cgi?path=rocketmq/4.5.1/rocketmq-all-4.5.1-bin-release.zip
2、 环境要求
Linux64位系统
JDK1.8(64位)
源码安装需要安装Maven 3.2.x
3、 安装步骤
A、本教程以二进制包方式安装
1、解压安装包
2、进入安装目录
B、目录介绍
bin:启动脚本,包括shell脚本和CMD脚本
conf:实例配置文件 ,包括broker配置文件、logback配置文件等
lib:依赖jar包,包括Netty、commons-lang、FastJSON等
C、启动RocketMQ
1、启动NameServer
#启动NameServer nohup sh bin/mqnamesrv & #查看启动日志 tail -f ~/logs/rocketmqlogs/namesrv.log |
2、启动Broker
#启动Broker nohup sh bin/mqbroker -n localhost:9876 & #查看启动日志 tail -f ~/logs/rocketmqlogs/broker.log |
3、可能遇到的问题
RocketMQ默认的虚拟机内存较大,启动Broker如果因为内存不足失败,需要编辑如下两个配置文件,修改JVM内存大小
#编辑runbroker.sh和runserver.sh修改默认JVM大小 vi runbroker.sh vi runserver.sh #参考设置 JAVA_OPT="${JAVA_OPT} -server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m" |
4、测试RocketMQ
A、发送消息
#设置环境变量 export NAMESRV_ADDR=localhost:9876 #使用安装包的Demo发送消息 sh bin/tools.sh org.apache.rocketmq.example.quickstart.Producer |
B、接收消息
#设置环境变量 export NAMESRV_ADDR=localhost:9876 #接收消息 sh bin/tools.sh org.apache.rocketmq.example.quickstart.Consumer |
C、关闭RocketMQ
#关闭NameServer sh bin/mqshutdown namesrv #关闭Broker sh bin/mqshutdown broker |