大咖专栏 | DevOps组织如何有效地实施MSA

【摘要】 对于任何企业,MSA的实施都不能一蹴而就。企业在实施MSA的过程中应该避免教条主义、理想化、低估必需的投资、边学习新流程边变更架构、担忧失败等风险与陷阱。企业可以在MSA实施指导框架的指引下,进一步建立MSA的战略目标、原则、实践、工具平台视图,以更好地指导MSA落地。

随着领域驱动设计(DDD,Domain Driven Design)、持续交付、云计算、小型自治团队、大型集群系统等实践的发展与流行,微服务架构(MSA,Microservices Architecture)也应运而生。在数字化转型时代,许多组织为了提升业务敏捷性(Business Agility),发现MSA或许是帮助自己更快地交付软件的强大武器,因为MSA有望在灵活的变更交付、技术灵活性、更精准的弹性等方面带来益处。

然而企业却很快发现,单纯将MSA视为灵活的架构模式,往往难以保障MSA的成功实施。因而,若要成功实施MSA,除了改变软件交付物的结构化方式,企业必须在以下方面进行改变:

    应用开发、交付与运维的组织方式

     维持流动性同时确保质量与弹性的流程

     微服务相关模式与实践所必需的新工具与平台

那么,企业到底应该如何实施MSA才能提升成功率呢?有没有一种指导性框架为MSA实施保驾护航呢?在探讨此问题之前,也许明确一下MSA的适用场景更为紧要。在《人月神话》中,Fred Brooks曾指出“软件没有银弹”。此论断对于MSA仍然适用。企业不应该将MSA视为软件交付的银弹。从严格意义上来讲,MSA的优势在于帮助企业解决软件领域的复杂问题(Complex Problem)。一般来讲,复杂问题具有以下几个特征:(1)没有足够的数据进行决策;(2)必须进行探索;(3)需要浮现式设计与实践;(4)面向行动的方法。关于复杂问题的详细阐述,可以参考Cynephin框架(https://www.mindtools.com/pages/article/cynefin-framework.htm)。当然,在企业面对复杂问题或者系统时,如果同时需要频繁部署来快速响应市场需求、需要高可用以及快速弹性神作,MSA将成为优先选项。

基于MSA的适用场景,并结合诸多企业实施MSA的实践,形成了如下图所示的实施指导框架,称之为“3PSD”。

图 MSA实施指导框架3PSD

从上图中,可以自然而然地看出流程(Process)、人员(People)、平台(Platform)、服务(Service)、数据(Data)之间相互影响:

     从流程来讲:流程需要平台自动化、流程驱动自治团队、流程优化驱动服务的范畴界定;

     从人员来讲:人员文化支持流程优化,人员技能影响平台选择;

     从平台来讲:平台能力支持流程执行、人员角色、约束服务,平台持久化与移动数据;

     从服务来讲:服务的定义驱动平台需求、人员组织、数据组织;

     从数据来讲:数据的组织驱动服务的范畴界定,数据需求驱动平台需求。

因此,对于实施MSA的软件系统来讲,流程、人员、平台、服务、数据很难一步到位,采用迭代方式成为一种必然选择。当然,MSA的实施难以有明显的最终状态,因为随着迭代深入,实施框架中的5个方面发生变化的概率非常大。

在实施MSA之前,企业组织确定了适应的场景后,应该开展准备工作,评估组织的就绪程度。简单来讲,企业可以从以下几方面进行评估:

1.     真正敏捷;敏捷开发流程与实践;

2.     自动化程度:构建、测试、部署等;

3.     工程师文化:规划交付,并准备好试验与演进;

4.     践行DevOps;持续交付等;

5.     产品思维;

经过评估认为实施MSA已就绪后,企业应该确认商业干系人需要快速、可靠、灵活的功能交付与变更带来的价值。这样,企业就可以按照指导框架在流程、人员、平台、服务、数据等方面开展相关工作。

1      优化流程

开发与运维流程通常是MSA交付中最为关键并且最容易被忽略的部分。MSA需要非常高水平的开发与运维流程的成熟度与自动化。目前来看,DevOps的原则、文化与实践对于MSA的成功至关重要。企业组织应该从以下方面优化流程:

    持续集成/持续交付:利用流水线实现微服务并行独立部署

    流程自动化:构建、测试、部署、环境等环境自动化能力

    DevOps反馈环:在交付流程中增强反馈,随时掌握服务状态、健康度,行为等

    发布方式与计划:每个独立的微服务可以独立、按需发布,来满足快速的需要;

    优化测试与QA流程:采用TDD/BDD、集成测试等测试左移(Shift-left testing)与金丝雀测试、A/B测试、在线巡检等测试右移(Shift-right testing)相结合

    解决自治与分布服务引发的治理诉求:服务的SLA定义,服务下线等等;

2      提升人员与技能

通过MSA实现敏捷性非常依赖小型的自治团队。此团队应该与业务服务领域对齐,而不是技术领域。此组织结构与敏捷开发中的特性团队或者组件团队类似。关于组织结构,可以参考“DevOps组织如何选取拓扑结构以提升协作效能”。对于人员与技能,建议在以下在以下方面进行提升:

    平衡自治与责任

    敏捷与DevOps文化相关的原则

    面向服务的工程师文化

    现代开发范式与概念:例如DDD、事件驱动架构、浮现式架构等;

    更广泛的技术技能:例如T-shaped;

    拥有质量意识:例如单元测试、测试自动化等;

3      构建技术平台

对于实施MAS的企业来讲,不单单需要敏捷与DevOps流程、良好组织与技能丰富的人员,更需要技术平台来管理日益增加的复杂性。

图 MSA技术平台全景

如上图所示,MSA平台不应被过度简化为容器化,MSA平台包含了外部网关、Service Mesh、遥测与监控、CI/CD自动化等部件。关于MSA平台的选择可以分为2类:一类为云服务提供商平台,一类为部署在自行管理基础设施上的云原生应用平台。对于第一类平台,企业可以选择华为云相关服务,例如DevCloud()提供了端到端DevOps平台能力,可以有效支持CI/CD自动化;ServiceStage提供面向企业的云原生应用管理服务。

4      定义服务

在MSA中,模块化的主要单元是服务本身,主要包括:(1)功能集合与访问功能的接口;(2)实现的边界与部署单元。企业可以应用DDD与限定上下文来划定微服务,并在灵活性、复杂性与性能之间进行权限,使微服务满足以下特征:

     松耦合

     高内聚

     采用公开标准暴露接口

     实现单一职能

     拥有管理的数据

     独立部署

     独立伸缩

     将发布的API与微服务实现解耦

5      解耦数据

为了提高敏捷度以及服务间的独立性,企业必须对服务的数据进行解耦。数据解耦可以参考以下原则进行:

    数据必须被一个也只能被一个微服务管理(创建、更新与删除)

    数据只能通过管理此数据的微服务提供的接口访问

    严格禁止不同服务拥有的数据之间的数据库强制型关系(例如引用完整性)

    需要平衡数据解耦带来复杂性与敏捷性

    可以通过API契约进行数据关系建模

对于任何企业,MSA的实施都不能一蹴而就。企业在实施MSA的过程中应该避免教条主义、理想化、低估必需的投资、边学习新流程边变更架构、担忧失败等风险与陷阱。企业可以在MSA实施指导框架的指引下,进一步建立MSA的战略目标、原则、实践、工具平台视图,以更好地指导MSA落地。

图 MSA战略目标-原则-实践-平台工具视图

华为云DevCloud作为一站式云端DevOps平台,集成华为近30年研发实践和前沿理念,面向开发者提供研发工具服务,让软件开发简单高效。现支持5人以下额度范围内,可以免费使用,并且可以预约免费的产品演示和技术交流,详情查看华为云官网

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,736评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,167评论 1 291
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,442评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,902评论 0 204
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,302评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,573评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,847评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,562评论 0 197
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,260评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,531评论 2 245
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,021评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,367评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,016评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,068评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,827评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,610评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,514评论 2 269

推荐阅读更多精彩内容