简书:亚武de小文 【原创:转载请注明出处】
消息中间件(MQ)
LengToo上学.png消息队列中间件 (Message Queue Middleware,简称为 MQ) 是指利用高效可靠的消息传递机制进行与平台无关的数据交流,并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排队模型,它可以在分布式环境下扩展进程间的通信。
简介
- 消息中间件适用于需要可靠的数据传送的分布式环境 。
- 能在不同平台之间通信,消息中间件常被用来屏蔽各种平台及协议之间的特性,实现应用程序之间的协同
主流开源mq
- 分类
ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,RocketMQ
它们都提供了基于存储和转发的应用程序之间的异步数据发送,即应用程序彼此不直接通信,而是与作为中介的消息中间件通信 。 消息中间件提供了有保证的消息发送,应用程序开发人员无须了解远程过程调用 ( RPC) 和网络通信协议的细节 。
原理图(以rabbitmq为例)
简单原理图.png应用场景
1、解耦
项目刚开始难以精确预测未来需求,使用消息中间件可以达到未雨绸缪。它在处理过程中间插入了一个隐含的、基于数据的接口层,两边的处理过程都要实现这一接口,这允许你独立地扩展或修改两边的处理过程,只要确保它们遵守同样的接口约束即可 。
2.、冗余〈存储)
在某些情况下处理数据的过程会失败。消息中间件可以把数据进行持久化直到它们已经被完全处理,通过这一方式规避了数据丢失风险。在把一个消息从消息中间件中删除之前,需要你的处理系统明确地指出该消息己经被处理完成,从而确保你的数据被安全地保存直到你使用完毕。
3、扩展性
消息中间件对应用的处理过程进行了解耦,提高消息入队和处理的效率就变得很容易了,只要另外增加处理过程即可,不需要改变代码,也不需要调节参数。
4、削峰
在访问量剧增的情况下,应用仍然需要继续发挥作用,但是这样的突发流量并不常见。如果以能处理这类峰值为标准而投入资源,无疑是巨大的浪费 。使用消息中间件能够使关键组件支撑突发访问压力,不会因为突发的超负荷请求而完全崩惯 。
一般在秒杀活动中使用较多
5、可恢复性
当系统一部分组件失效时,不会影响到整个系统。消息中间件降低了进程间的耦合度,所以即使一个处理消息的进程挂掉,加入消息中间件中的消息仍然可以在系统恢复后进行处理 。
6、顺序保证
在大多数使用场景下,数据处理的顺序很重要,大部分消息中间件支持一定程度上的顺序性。
7、缓冲
消息中间件通过一个缓冲层来帮助任务最高效率地执行,写入消息中间件的处理会尽可能快速 。 该缓冲层有助于控制和优化数据流经过系统的速度。
8、异步通信
很多时候应用不想也不需要立即处理消息 。 消息中间件提供了异步处理机制,允许应用把一些消息放入消息中间件中,但并不立即处理它,在之后需要的时候再慢慢处理
网友评论