消息中间件和AMQP

消息中间件也叫消息代理,是专门用来处理消息的代理组件,消息代理从消息生产者那里接收消息,然后按规则分发消息到消息队列,消息消费者从队列获取消息并确认消息处理。

消息中间件隔离了消息生产者和消费消费者,使它们可以异步发送消息和接受消息。使用了消息中间件的软件架构我们称为面向消息的架构。

面向消息的架构可以带来一些显著的好处:

  • 方便异构,生产者和消费者可以用不同的技术手段实现,只要遵从消息处理规则。所以有很好的灵活性和扩展性。
  • 方便伸缩,可以同时有多个生产者或多个消费者并行工作,按消息处理能力可以自由配置生产者和消费者的个数,同时生产者和消费者可以处于不同的节点,是可分布的。
  • 弹性容错增强,生产者和消费者可以随时加入或离开,不会影响整个系统的运行。如果有某个消费者出错的,只要重启或交由其他节点即可,不会导致数据丢失。
  • 流量管理和批处理能力,消息队列的引入带来了一个消息缓冲区,可以抵抗异常流量和提高处理效率。

当然,引入消息中间件也会带来一些问题,实现上也增加了难度,需要权衡考虑,比如会增加资源消耗,一些情况下会导致消息重复处理,消息排序也会带来问题,处理代码会冗余,还可能带来数据不一致,还会带来一定的延迟。

为了更好的使用消息中间件,需要一个消息处理模型,这就是被引入的AMQP模型 ,
AMQP模型对消息传递过程做了详细的定义:发布者发布消息给交换机(注意:不是硬件交换机的概念),交换机依据绑定分发消息给队列们,消费者从对应的队列提取消息。

AMQP(Advanced Message Queuing Protocol)是一种消息队列协议标准,为面向消息的中间件设计。 基于此协议的客户端与消息中间件可传递消息,并不受客户端/中间件不同产品,不同的开发语言等条件的限制。

在AMQP标准中,三个主要功能模块(交换机 exchange,消息队列 message queue,绑定 binding)连接成一个处理链完成预期的功能:

  • “交换机(exchange)”接收发布应用程序发送的消息,并根据一定的规则将这些消息路由到“消息队列”。
  • “消息队列(message queue)”存储消息,直到这些消息被消费者安全处理完为止。
  • “绑定(binding)”定义了“交换机”和“消息队列”之间的关联,提供路由规则。

AMQP定义了消息的格式,含有消息属性和消息内容,消息属性中有些是针对消息代理的,不过大部分是针对上层应用的。另外,由于网络通讯是不可靠的,消息代理支持消费者的消息确认,如果消息确认被使用,消息代理只有收到确认才会清掉队列中的消息。对于不能依据绑定分发的消息,消息代理有几种可选的方式,例如返回给发布者,直接丢弃,或扔入一个缺省队列。发布者可以在发布消息的时候指定这些处理方式。

AMQP详细定义了交换机类型,消息交换算法依赖于交换机类型和交换规则,AMQP里有一下几种交换类型:

  • 直接交换(Direct Exchange):消息分发到特定路由关键字的队列。
  • 扩散交换(Fanout Exchange):消息分发到所有绑定的队列,路由关键字被忽略,适合消息广播 。
  • 主题交换(Topic Exchange):通过支持匹配规则的路由关键字匹配,消息分发到一个或多个消息队列。
  • 头部交换(Headers Exchange):通过消息头部属性匹配(路由关键字被忽略),消息分发到一个或多个消息队列。这种方式比较灵活,但每个消息会有额外的匹配属性。

使用这个模型我们可以很容易的模拟出存储转发队列和主题订阅这些典型的应用场景。

AMQP可以支持一些典型的消息中间件应用

  • 点对点连接 : 单对单
  • 存储转发 : 多对单,多个消息发送者,单个消息接收者
  • 分布式事务 : 多对多,多个消息发送者,多个消息接收者
  • 发布订阅 : 多对多
  • 基于内容的路由: 多对多
  • 文件传输队列 : 多对多

AMQP实现:
RabbitMQ 很好的支持了AMQP模型标准,也是非常好用的消息中间件,可以用来实践AMQP模型。

参考资料:
https://www.rabbitmq.com/tutorials/amqp-concepts.html

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,847评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,208评论 1 292
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,587评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,942评论 0 205
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,332评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,587评论 1 218
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,853评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,568评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,273评论 1 242
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,542评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,033评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,373评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,031评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,073评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,830评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,628评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,537评论 2 269

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,100评论 18 139
  • 来源 RabbitMQ是用Erlang实现的一个高并发高可靠AMQP消息队列服务器。支持消息的持久化、事务、拥塞控...
    jiangmo阅读 10,266评论 2 34
  • AMQP大致内容就是,将消息和队列绑定起来,规定让进入到交换机中的具有某个路由键的消息进入到指定队列中去。 Rab...
    StevenMD阅读 1,771评论 0 3
  • 1 RabbitMQ安装部署 这里是ErLang环境的下载地址http://www.erlang.org/down...
    Bobby0322阅读 2,165评论 0 11
  • 三哥打电话跟我说他失恋了,喊我出去喝啤酒,我们毕业一年了,同在一个陌生的城市,但是忙于生计,平常没事也就只是游戏上...
    云浦阅读 334评论 0 3