经产观察
IT资讯
IT产业动态
业界
网站运营
站长资讯
互联网
国际互联网新闻
国内互联网新闻
通信行业
通信设备
通信运营商
消费电子
数码
家电
IT资讯

编程语言的消息之间的区别

作者:habao 来源: 日期:2019-11-19 6:25:52 人气:

  如果你经常看技术文章应该听过「消息队列」、「消息代理」和「消息中间件」这三个词,它们有什么区别和联系呢?希望这篇文章能告诉你答案。

  换句更简洁的话:「将具体业务和底层逻辑解耦的软件」。其实符合中间件的软件范畴非常宽,日常用的Redis、Nginx、Zookeeper、Memcached等等都是「中间件」。所谓的「中间」是相对于架构体系内的,它不涉及具体的业务逻辑也不涉及底层的硬件逻辑,用于用户数据交换和管理,能够起到「中介」的作用,这就是中间件。

  那么问题来了:为什么需要中间件的帮助(代理),直接去和对应的应用程序、硬件、操作系统等交互/通信不好嘛?

  当项目很小的时候,直接使用编程语言下的数据库驱动操作数据库就可以了,有些开发会用ORM的方式操作数据库:这是够用的。

  但随着业务发展,数据量和读写QPS越来越高,主从模式的MySQL实例压力越来越大,单纯的对服务器硬件升级已经无法满足生产的需要。在我司不成文的习惯是单表不要超过5千万条记录,数据库量大的时候就设计分库分表,也就是「分而治之」,把QPS和数据量分片限定在一个范围内。

  当然还有很多其他相关的功能,如读写分离、由策略、统计、管理、鉴权等等。这些是在业务逻辑之上的,不应该在业务代码中把这部分堆进去,应该抽象它们出来作为一个的组件,这就是数据库中间件。

  现在主流的开源数据库中间件有Mycat、MySQL-proxy、Atlas等等,不过现在都不怎么了,另外还有Cetus ,作者是tcpcopy的作者,这个项目还在不断,有同学有兴趣的可以试试。当然其实各大公司内部都有自己的数据库中间件产品,更多的贴近公司的业务产品和基础设施。

  一般Web框架都支持中间件,Web框架中间件的本质是插件系统,是一系列的框架钩子,在收到请求和返回响应这个过程里面去做一些额外的事情。中间件种类很多,举例一些:

  框架里面可能内置了一些常用的中间件,也可能只是内置中间件支持。你可以配置使用某个(些),也能方便的自定义中间件

  Web视图中不需要手写中间件逻辑,按约定好的用法框架会在对应的生命周期中按照约定的顺序去执行这些中间件逻辑

  PS:Golang语言中最知名的Web框架Gin支持中间件,而且还官网搞了个叫gin-gonic/contrib的项目搜集社区里面的中间件。

  消息队列就是Message+Queue。其实消息可以说是一个数据传输单位,它包含了创建时间、通道/主题信息、输入参数等全部数据;队列(Queue)是一种FIFO(先进先出)的数据结构,编程语言一般都内置(内存中的)队列实现,可以作为进程间通讯(IPC)的方法。使用队列最常见的场景就是生产者/消费者模式:生产者生产消息放到队列中,消费者从队列里面获取消息消费。

  准确的说,消息队列(以下简称MQ**是一种能实现生产者到消费者单向通信的通信模型,而一般大家说MQ是指实现了这个模型的中间件,比如RabbitMQ、RocketMQ、Kafka等。

  响应耗时。事实上做的比这要多得多,每一项都需要有开销,增加响应时间。如果这些逻辑是同步执行的,用户要等多久?这种体验是完全不可以接受的!所以呢,需要一种异步消费的机制

  过度耦合。本来仅仅是一个订单系统,结果上述的那些东西都要堆进来,这就成了一个巨无霸应用,未来开发、都是问题

  错误丢失。假如这些后续的行为中某个(些)服务正好出现了故障执行失败或者验证超时,但是付款成功的确认是必须完成的,那么需要有个地方存这些还没有被正确消费的部分

  需要组(广)播。就像的订单场景,付款成功这个消息被发送给多个子系统,相当于组播。未来如果要新增删减订阅源,怎么便捷的实现呢?

  分布式。其实消息中间件解决的就是分布式系统之间消息传递的问题,消费者可以分布在多台服务器上,一方面降低了由于单点故障引起的消息队列阻塞的风险,另外一方面也非常容面部痣的位置与命运易横向扩展。

  高性能和高吞吐量。例如RocketMQ有亿级消息堆积能力,广泛应用在阿里系的各种高并发场景下;而Kafka在实时计算、日志采集等场景下算是业界的标准。

  消息代理是一种架构模式,用于消息验证、变换、由。虽然不同的消息中间件架构和实现各不相同,但是大部分都实现了Broker:其实就是消息中间件服务器,它是中间件的核心。

  注意:RabbitMQ、Kafka、RocketMQ等都有消息代理,但是注意,不是所有中间件都这么选,例如ZeroMQ,它用了套接字风格的API。

  在一些地方其实说消息代理就是指消息中间件,如Python语言知名的分布式任务队列框架Celery中就这么称呼的(所谓的「任务」其实就是一个包含了任务全部数据的消息)。

  Java是一个面向对象的语言。对程序员来说,这意味着要注意应中的数据和数据的方法(method),而不是严格地用过程来思考。在一个面向对象的系统中,类(class)是数据和操作数据的方法的集合。数据和方法一起描述对象(object)的状态和行为。每一对象是其状态和行为的封装。类是按一定体系和层次安排的,使得子类可以从超类继承行为。在这个类层次体系中有一个根类,它是具有一般行为的类。Java程序是用类来组织的。