天天看点

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

1. MQ介绍

1.1 为什么要用MQ

消息队列是一种“先进先出”的数据结构

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

其应用场景主要包含以下3个方面

场景一: 应用解耦

系统的耦合性越高,容错性就越低。以电商应用为例,用户创建订单后,如果耦合调用库存系统、物流系统、支付系统,任何一个子系统出了故障或者因为升级等原因暂时不可用,都会造成下单操作异常,影响用户使用体验。

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

使用消息队列解耦合,系统的耦合性就会提高了。比如物流系统发生故障,需要几分钟才能来修复,在这段时间内,物流系统要处理的数据被缓存到消息队列中,用户的下单操作正常完成。当物流系统回复后,补充处理存在消息队列中的订单消息即可,终端系统感知不到物流系统发生过几分钟故障。

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

场景二 流量削峰

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

应用系统如果遇到系统请求流量的瞬间猛增,有可能会将系统压垮。有了消息队列可以将大量请求缓存起来,分散到很长一段时间处理,这样可以大大提到系统的稳定性和用户体验。

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

一般情况,为了保证系统的稳定性,如果系统负载超过阈值,就会阻止用户请求,这会影响用户体验,而如果使用消息队列将请求缓存起来,等待系统处理完毕后通知用户下单完毕,这样总不能下单体验要好。

场景二优点说明:业务系统正常时段的QPS如果是1000,流量最高峰是10000,为了应对流量高峰配置高性能的服务器显然不划算,这时可以使用消息队列对峰值流量削峰

场景三 数据分发

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

通过消息队列可以让数据在多个系统更加之间进行流通。数据的产生方不需要关心谁来使用数据,只需要将数据发送到消息队列,数据使用方直接在消息队列中直接获取数据即可

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

1.2 MQ的优点和缺点

优点:解耦、削峰、数据分发

缺点:

1.系统可用性降低,系统引入的外部依赖越多,系统稳定性越差。一旦MQ宕机,就会对业务造成影响。如何保证MQ的高可用?

2.系统复杂度提高,MQ的加入大大增加了系统的复杂度,以前系统间是同步的远程调用,现在是通过MQ进行异步调用。如何保证消息没有被重复消费?怎么处理消息丢失情况?那么保证消息传递的顺序性?

3.一致性问题,A系统处理完业务,通过MQ给B、C、D三个系统发消息数据,如果B系统、C系统处理成功,D系统处理失败。如何保证消息数据处理的一致性?

1.3 各种MQ产品的比较

常见的MQ产品包括Kafka、ActiveMQ、RabbitMQ、RocketMQ。

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

2. RocketMQ快速入门

RocketMQ是阿里巴巴2016年MQ中间件,使用Java语言开发,在阿里内部,RocketMQ承接了例如“双11”等高并发场景的消息流转,能够处理万亿级别的消息。

2.1 下载RocketMQ

https://www.apache.org/dyn/closer.cgi?path=rocketmq/4.5.1/rocketmq-all-4.5.1-bin-release.zip
           

2.2 环境要求

Linux64位系统(centos6.8)
JDK1.8(64位)
源码安装需要安装Maven 3.2.x
           

2.3 安装RocketMQ

2.3.1 安装步骤

本教程以二进制包方式安装
1. 安装jdk
2. 解压安装包(作者将rocketmq放在了opt目录下)
3. 进入安装目录
           

2.3.2 目录介绍

* bin:启动脚本,包括shell脚本和CMD脚本
* conf:实例配置文件 ,包括broker配置文件、logback配置文件等
* lib:依赖jar包,包括Netty、commons-lang、FastJSON等
           

2.3.3 根据自身服务器或电脑性能更改配置

RocketMQ默认的虚拟机内存较大,启动Broker如果因为内存不足失败,需要编辑如下两个配置文件,修改JVM内存大小

# 编辑runbroker.sh和runserver.sh修改默认JVM大小
cd /opt/rocketmq-all-4.4.0-bin-release/bin
vi runbroker.sh
vi runserver.sh
           

runbroker.sh修改内容为:

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

runserver.sh修改内容为:

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门
  • 参考设置:

    JAVA_OPT="${JAVA_OPT} -server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"

2.3.4 启动RocketMQ

1.启动NameServer

# 1.启动NameServer
nohup sh bin/mqnamesrv &
# 2.查看启动日志
 tail -f nohup.out 
           

2.启动Broker

# 1.启动Broker
nohup sh bin/mqbroker -n localhost:9876 &
# 2.查看启动日志
tail -f ~/logs/rocketmqlogs/broker.log 
           

3.检查是否启动成功,使用

jps

命令(如果jps命令执行失败,则是jdk没有安装好)

第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

2.4 测试RocketMQ

2.4.1 发送消息(前提是打开两个终端窗口,并进入到rocketmq文件夹下)

# 1.设置环境变量
export NAMESRV_ADDR=localhost:9876
# 2.使用安装包的Demo发送消息
sh bin/tools.sh org.apache.rocketmq.example.quickstart.Producer
           
第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

2.4.2 接收消息

# 1.设置环境变量
export NAMESRV_ADDR=localhost:9876
# 2.接收消息
sh bin/tools.sh org.apache.rocketmq.example.quickstart.Consumer
           
第一章 RocketMQ简介-MQ比较-安装-测试1. MQ介绍2. RocketMQ快速入门

2.5 关闭RocketMQ

# 1.关闭 NameServersh 
 bin/mqshutdown namesrv
 # 2.关闭 Brokersh 
 bin/mqshutdown broker
           

继续阅读