Jenkins Multi-configuration Project使用体验

多年之后因为项目需要又开始自己动手配置Jenkins。这次尝试了一下multiple configuration project这个类型的配置,对于如何使用以及适用的场景(尤其是android和iOS的编译场景)记录一下自己的感受。(文中英文部分实在是不知道翻译成什么中文比较合适,jenkins自己的汉化翻译又太....)

什么是多配置(multi-configuration)

详细的说明可以直接阅读官方wiki
简单来说,它是一组job的集合,这些job之间的差别就是配置不同,比如:一个基础库,同一套代码需要编译linux、windows、mac平台的debug和release版本,以前我们是建立3个job分别对应三个环境,如果我们的job不能一次把debug和release都编出来的话,我们就需要建立6个job,如下:

debug release
windows job1:win+debug job2:win+release
linux job3:linux+debug job4:linux+release
mac job5:linux+debug job6:linux+release

虽然Jenkins提供了从已有的job复制的功能,那也是要新建并修改5次啊 o(≧口≦)o

从上表我们可以发现,总共6个job,唯一的不同就是平台和编译类型的不同,看起来我们可以通过将这些组合变成6个参数,那就可以只用一个job就搞定了,你是不是想到了参数化,不失为一种办法,可以试试o( ̄3 ̄)oo( ̄3 ̄)o

言归正传,multi-configuration的核心其实就是上面的表格,将条件排列组合成一组,放在一个项目里面,而不是一个组合一个项目。比如下图就是设置的一个app编译不同环境服务器对应的不同版本的多配置项目后得到的配置矩阵:

通常你会在项目页面的左上角看到它

同时可以看到,我们可以配置哪些配置需要构建,哪些不需要,比如图中的product环境的debug版本的配置就不会构建。

每一次的构建都会把配置都构建,并且将结果保存在一起,如下图,构建#7里面我指定的配置在#7这轮里面的构建结果、对应的归档等都可以在里面,通过Configuration Matrix里面对应的入口(那些圆形的图标,同时这些图标也和构建一样,表示了每个配置的构建成功与否)我们可以进入到具体的配置的构建结果页面,其和一般的构建结果页面完全一致。

Screen Shot 2017-05-27 at 13.09.41.png

如何配置

具体的配置和一般的freestyle项目一样,主要是以下几点:

  1. 新建项目选择multi-configuration project


    新建项目
  2. 通过add axis设定配置矩阵


    配置矩阵

    aixs有三种:“Label expresse”使用slave node的label的表达式值作为配置项,即你可以将构建指定在对应label的slave上执行。比如我们有几个mac mini作为slave,它们的label被设置为“iOS”, 并且还有其他的slave,我们不希望iOS的项目在执行的时候被分配到非mac机器上,只需要增加一个“Label expression”的axis,并只填写一个“iOS”的值,那么当multi-configuration下的各个配置同时执行时,它们都只会在这些mac机器上执行。或者简单点使用“slaves”类型的axis,在指定label值或者slave的名字,如下图:


    这里会直接列出label或者slave的名字供选择

    每个axis包含一个名字和对应的值,最后的矩阵就是这些值的的全排列(那axis排列),比如文中提到的test_mult这个项目,就是配置了type和env两个axis。type有“debug”和“release”两个值,env有“Env_test” “Demo” “Product”三个值。所以整个矩阵就有第一张图里面的6种组合。
    添加axis
  3. 添加配置的过滤规则(如果需要的话)
    比如上图,test_mult里面Prodect环境的Debug版本我们是不编译的,是通过“Combination Filter”来实现的,如下图


    Combination Filter

    Filter里面是填写Groovy的表达式,只有表达式值为真的配置项从会被构建,具体写法可以点击combination filter后的“?”来了解

  4. 如果想先构建一个(或几个)配置作为验证,如果这个配置能够达到预期再接着构建其他配置的话(称为: touchstone build),勾选上“Execute touchstone build first”并且设置好对于的groovy表达式即可,jenkins会先执行表达式为真配置,并且在构建结果达到你设定的期望“stable” 或者“unstable”后再执行余下的配置


    Touchstone Build

执行过程(简述)

jenkins会按照配置矩阵(config matrix)生成对应的工作目录

image.png

再在对应的目录下进行相关的构建工作(同步代码、编译、blahblah),并收集相关信息。�在每个目录下做的事情和一般的freestyle项目一样。

适用场景

  1. 降低劳动强度,避免通过复制配置不同的项目
  2. 不同配置需要快速、并行构建
  3. 多配置情况下,希望并行快速的同时,又想节省slave资源:先跑一个配置的构建,如果构建成功了,才同时并行跑其他所有配置
  4. 在事件驱动可自动触发构建(比如:使用gerrit、gitlab等带有钩子的代码仓库)的项目中,不同配置构建的时候不想一次触发就所有配置都并行构建,希望一个接一个构建的:可以通过multi-configuration project 中勾选“Run each configuration sequentially" 来实现

Android项目中使用

  1. 如果工程还是Ant工程,multi-configuration project可以帮你并行编译,节省编译时间
  2. 如果工程已经是gradle的,除非想不同配置依次编译(我想大多数情况大家应该都不需要),否者不适用:以上面提到的工程为例,同样是编译5个配置的apk,利用的gradle的flavor,一次gradle build,耗时4分29秒,而用multi-configuration 并行的跑,却耗时7分16秒。原因就是上面提到的multi-configuration的执行过程,相比gradle的build flavor打包流程的效率低。
  3. 如果使用的是比较老版本的android plug,而又有多个配置都要编译,并且你还需要搜集一下每个编译过程中的文件。比如:有多个不同flavor的relase版本需要编译,每个的代码混淆后的mapping文件你都需要搜集,那利用multi-configuration只需在项目配置里面archive workspace里面的mapping文件即可,在构建后的各个配置对应的目录里面它们就乖乖的在那里了。不过,这个需求还是用最新的android gradle plugin吧,因为目前它已经改变了,不在是所以flavor共用一个输出文件夹,而是生成和flavor一一对应的文件夹,这样你用一个普通的freestyle项目就可以了,只需要在最后archive不同目录下的mapping文件即可

iOS项目中使用

可以大大提高编译效率,即使在配置的iOS编译机单机性能不强的情况下,只要slave数量*executors 的值大于等于一个multi-configuration project里面的matrix数量,一次代码提交到所有matrix打包完,耗时1分钟是完可能的。以目前的项目为例:3台mac mini,2core 8G, 以前在一个普通project里面通过增加多个build 步骤打包4个配置的ipa,总耗时16分钟;用multi-configuration并行打包,只耗时7分钟。

零配置的Multi-configuration Project == 普通的Project?

可以说是:因为你不加任何配置,那整个项目的设置和普通的freestyle的项目没什么区别。
也可以说不是:运行起来的机制不同,它会在构建的时候使用一个默认配置来跑,相关的文件、结果都在其下。构建的时候你会发现有一个executor在同时跑两个任务,具体的影响好没有去看,不过作为强迫症者,表示不能忍。

test_mult相当于主任务
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,847评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,208评论 1 292
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,587评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,942评论 0 205
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,332评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,587评论 1 218
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,853评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,568评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,273评论 1 242
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,542评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,033评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,373评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,031评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,073评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,830评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,628评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,537评论 2 269

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,100评论 18 139
  • Spring Boot 参考指南 介绍 转载自:https://www.gitbook.com/book/qbgb...
    毛宇鹏阅读 46,358评论 6 343
  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 170,568评论 25 707
  • 忽然间觉得它们不完全算是排版 称之为手帐本里的点缀与装饰好像更合理 今天依旧是小清新风格。>3< 只是拍照的光线有...
    木猫阅读 478评论 1 5
  • 生活不是童话故事,太梦幻的日子并不适合你。我特别喜欢你低下头认真做事的子。 ——...
    森林少女北北阅读 288评论 0 0