浅谈互联网项目的系统架构演进

一、基础知识

1.1计算机

    计算机的组成是有五部分完成的,分别是:输入设备、输出设备、存储器,存储器里面有运算器和控制器


模型图

    阿里巴巴在2009年发起了一项去"IOC"的驱动

    IOE指的是IBM的小型机Oracle的数据库和EMC的高端存储设备,2009年的去IOE运动,一直到2003的支付宝的最好一台IBM的小型机的下线

为什么要去IOE?

    阿里过去数据库使用的是Oracle,并使用小型机和高端存储设备提供高性能的数据处理和存储服务。随着公司的业务量的提升,用户规模的不断上涨,传统的集中式的架构Oracle数据库在扩展方面遭遇到了瓶颈。像传统的Oracle,DB2都是以集中式为主,存在的缺点就是扩展性的不足,集中式的扩展主要是采用的是向上的扩展不是水平的扩展, 这样时间长了,早晚都会遇到系统瓶颈。

1.2 集群

    多台机器连接在一起共同工作,组成的就是集群

    饭店原来是一个厨师,切菜洗菜备料炒菜全部一个人干。后来客流量比较大,一个厨师忙不过来,又请了一个初始,两个厨师都能炒一样的菜,这两个厨师的关系就是集群。


集群

1.3 分布式

    为了让厨师专心炒菜,把菜做到极致,又请了一个配菜师负责切菜、备菜、备料,厨师和配菜师的关系就是分布式的,一个配菜师父也忙不过来,又请了一个配菜师的关系就是集群了。所以说有分布式的架构中可能有集群,但是集群不等于分布式。

1.4 副本机制

    副本指的是在分布式系统中为数据或服务提供冗余

    数据副本指在不同的节点上持久化同一份数据,当出现某一个节点的数据丢失时,可以从副本读取数据。数据副本是分布式系统中结果数据丢失的唯一手段。

    服务副本表示的是多个节点提供相同的服务,通过主从关系来实现服务的高可用方案。


二、项目架构演进

2.1、LAMP项目

    单体应用架构,小型系统应用程序、数据库、文件等所有的资源都在一台服务器上俗称为LAMP。也称为 all in one 架构(一体式架构)

    特征:应用程序、数据库、文件等所有的资源都在一台服务器上

    描述:通常服务器操作系统使用linux,应用程序用PHP、Java、C# 等开发,然后部署在Apache、Tomcat上,数据库使用Mysql,汇集各种免费开源软件以及一台廉价服务器就可以开始系统的发展之路了。

all in one 架构

2.2、多机部署

    随着网站用户逐渐增多,访问量越来越大,硬盘、cpu、内存等开始吃紧,一台服务器难以支撑。我们将数据服务和应用服务进行分离,给应用服务器配置更好的CPU、内存等等,而给数据服务器配置更好、更快的硬盘,如图所示用了三台服务器进行部署,能提高一定的性能和可用性。

多机部署

2.3、服务器集群

    随着访问量和流量的增加,假设数据库没有遇到瓶颈,对应用服务器集群来对请求进行分流,提高程序的性能。存在的问题:用户的请求谁来转发,session如何来管理的问题。

服务器集群

2.4、数据库读写分离

    数据库的读与写操作都需要经过数据库,当用户量达到一定量时,数据库性能又成为了一个瓶颈。

    可以使用数据库的读写分离,同时要接入多个数据源,通过同意的数据访问模型进行访问,数据库的读写分离是将所有的写操作引入到主库中(master),将读操作引入到主库中(salve),此时应用程序也要做出相应的变化,我们实现了一个数据访问模块(data access module),使上层写代码的人不知道读写分离的存在,这样多数据源的读写对业务代码就没有侵入,这就算代码层面的演变。

数据库读写分离

2.5、搜索引擎

    数据库做读库的话,常常对模糊查询的性能不是很好,特别对大型的胡来往公司来说,像搜索模块就比较核心了,这时可以使用搜索引擎了,虽然可以大幅度的提高查询的数据,但是同事也会带来一些问题比如索引的构建。

搜索引擎

2.6、缓存

    随着访问的并发越来越高,为了降低接口的访问时间提高服务器性能,继续对架构进行演进。

    我们发现有很多业务数据不需要每次都从数据库中获取,于是我们使用了缓存,因为80%的业务访问都是集中在20%的数据上(二八原则),如果能将这部分数据缓存再来,性能就能提高很多,缓存又分2中,一种是Application中的本地缓存,还有远程缓存,远程缓存又分为远程的单机式缓存和分布式缓存。

    对于一些热点的数据,可以使用redis,msmcache来作为应用层的缓存;另外在某些场景下,可以使用mongodb来提代关系型数据库来存储。

缓存

2.7、功能模块拆解

    随着业务的发展,业务越来越多,应用的压力越来越大。工程规模也越来越庞大。这个时候就可以考虑将应用拆分,按照业务将我们的用户、商户、交易等,分拆为一个个子系统。这样拆分以后,可能会有一些相同的代码,比如用户操作,商品的交易查询,所有会导致每个系统都会有用户查询和访问相关的操作。这些相同的代码和模块一定要抽象出来,这样有利于维护和管理。

功能模块拆分

2.8、SOA架构

    SOA:面向服务的架构(Service-Oriented Architecture),也就是把工程都拆分为服务层工程,表现层工程。服务处中包含业务逻辑,只需要对外提供服务即可,表现成只需要处理和页面的交互,业务逻辑都是调用服务层的服务来实现。工程都可以独立部署。

SOA架构

    RPC(Remote Procedure Call Protocol) 远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网路技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,RPC跨越了传输层和应用层。RPC使得开发包括网络分布式程序在内的应用程序更加容易。

2.9、微服务架构

    微服务架构风格是一种将单个应用程序作为一套小型服务开发的方法,每个应用程序都在自己的进程中运行,并且与轻量级机制(通常是HTTP资源API)进行通信。得益于以Docker为代表的容易滑技术的成熟以及 DevOps 文化的兴起,服务化的思想进一步演化,演变成我们今天所熟知的微服务。

微服务
微服务

2.10 服务网格化

    Service Mesh:用于处理服务间通信的基础设施层,用于在云原生应用复杂的服务拓扑中实现可靠的请求传递。在时间中,Service Mesh 通常是一组与应用一起部署,但对应用透明的轻量级网络代理。

    服务网络是一个基础设施层,功能在于处理服务间通信,职责是负责实现请求的可靠传递。在传递中,服务网络通常为轻量级网络代理,通常与应用程序部署在一起,但是对应用程序透明。

    服务网络称之为下一代微服务架构标准,比如市面上流行的三套微服务架构解决方案(Apache Dubbo Zookeeper,Spring cloud Netflix、Spring Cloud Alibaba)步南看出都是在使用各种组件组合成为我们期望的微服务架构的样子,这样就直接导致了咱们目前使用的微服务架构模型都是七拼八凑的,并没有一个有效的标准去界定这到底算不算微服务。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 160,706评论 4 366
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 68,002评论 1 301
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 110,462评论 0 250
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,375评论 0 216
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,763评论 3 294
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,849评论 1 224
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 32,033评论 2 317
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,768评论 0 204
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,490评论 1 246
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,734评论 2 253
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,204评论 1 264
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,566评论 3 260
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,227评论 3 241
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,137评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,934评论 0 201
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,926评论 2 283
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,774评论 2 274

推荐阅读更多精彩内容