gitlab集成阿里p3c代码规约检测

Why

在公司业务代码review过程中,发现有许多开发人员在开发的时候没有加入注释,命名也有许多不规范的,还有一些其它规范的问题,代码质量参差不齐,也会严重影响后续的维护。虽然现行的有许多的代码检查工具,但是都是非强制的,急需一种强制校验的方式来规避以上的问题,所以我们挑选了阿里的p3c代码规范,做了二开,保留了一些初期基础的代码规范,同时加入了一些与公司要求相关的检查点。我们把这个检查插件加入到了gitlab中,在提交代码时进行强制的校验,检查不通过的不允许提交。我们在gitlab的git-hooks中通过pre-receive来对push的请求进行拦截。

How

修改p3c-pmd

基于开源的alibaba-p3c[点击访问],我们clone到本地,修改其中的p3c-pmd包

image

我们可以看到它的rulesets下有许多的规则,我们添加了我们自己的”customize.xml“规则,同时我们需要根据实际的需求去挑选原有的规则哪些是必须的。所以我们根据这些规则抽出了一个新的文件”ali-p3c.xml“,其中我们会排除一些非必须的规则。


<?xml version="1.0"?>

<ruleset name="AlibabaJavaComments" xmlns="http://pmd.sourceforge.net/ruleset/2.0.0"

    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"

    xsi:schemaLocation="http://pmd.sourceforge.net/ruleset/2.0.0 http://pmd.sourceforge.net/ruleset_2_0_0.xsd">

    <description>futuremarket Java Comments

    <rule ref="rulesets/java/ali-comment.xml" >

        <exclude name="EnumConstantsMustHaveCommentRule"/>

        <exclude name="AvoidCommentBehindStatementRule"/>

        <exclude name="RemoveCommentedCodeRule"/>

    <rule ref="rulesets/java/ali-concurrent.xml" language="">

        <exclude name="ThreadPoolCreationRule"/>

        <exclude name="AvoidUseTimerRule"/>

        <exclude name="AvoidCallStaticSimpleDateFormatRule"/>

        <exclude name="ThreadLocalShouldRemoveRule"/>

        <exclude name="AvoidConcurrentCompetitionRandomRule"/>

        <exclude name="CountDownShouldInFinallyRule"/>

        <exclude name="LockShouldWithTryFinallyRule"/>

    <rule ref="rulesets/java/ali-constant.xml" >

    <rule ref="rulesets/java/ali-exception.xml" >

        <exclude name="MethodReturnWrapperTypeRule"/>

    <rule ref="rulesets/java/ali-flowcontrol.xml" >

        <exclude name="AvoidNegationOperatorRule"/>

    <rule ref="rulesets/java/ali-naming.xml" >

        <exclude name="AbstractClassShouldStartWithAbstractNamingRule"/>

        <exclude name="ExceptionClassShouldEndWithExceptionRule"/>

        <exclude name="TestClassShouldEndWithTestNamingRule"/>

        <exclude name="BooleanPropertyShouldNotStartWithIsRule"/>

        <exclude name="ArrayNamingShouldHaveBracketRule"/>

    <rule ref="rulesets/java/ali-oop.xml" >

        <exclude name="PojoMustUsePrimitiveFieldRule"/>

        <exclude name="PojoNoDefaultValueRule"/>

        <exclude name="PojoMustOverrideToStringRule"/>

        <exclude name="StringConcatRule"/>

    <rule ref="rulesets/java/ali-orm.xml" >

        <exclude name="IbatisMethodQueryForListRule"/>

    <rule ref="rulesets/java/ali-other.xml" >

        <exclude name="AvoidPatternCompileInMethodRule"/>

        <exclude name="AvoidApacheBeanUtilsCopyRule"/>

        <exclude name="AvoidMissUseOfMathRandomRule"/>

        <exclude name="AvoidDoubleOrFloatEqualCompareRule"/>

    <rule ref="rulesets/java/ali-set.xml" >

        <exclude name="ClassCastExceptionWithToArrayRule"/>

        <exclude name="UnsupportedExceptionWithModifyAsListRule"/>

        <exclude name="ClassCastExceptionWithSubListToArrayListRule"/>

        <exclude name="ConcurrentExceptionWithModifyOriginSubListRule"/>

        <exclude name="DontModifyInForeachCircleRule"/>

        <exclude name="CollectionInitShouldAssignCapacityRule"/>

    <rule ref="rulesets/java/customize.xml"/>

</ruleset>

以上,我们完成了我们规则的定制,maven打包得到我们需要的jar-with-dependencies包

mvn clean package -Dmaven.test.skip=true

添加git-hooks脚本

gitlab版本不一样git-hooks路径可能会不一样,公司使用的是GitLab Community Edition 12.2.1,我本地安装的是# GitLab Community Edition 12.8.5,都会比较新的版本。
进入到目录/opt/gitlab/embedded/service/gitaly-ruby/git-hooks,修改脚本pre-receive

#!/bin/bash
export LANG="zh_CN.UTF-8"
export JAVA_HOME=/home/jdk1.8.0_202
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin:
REJECT=0

while read oldrev newrev refname; do
    if [ "$oldrev" = "0000000000000000000000000000000000000000" ];then
        oldrev="${newrev}^"
    fi
    committer=`git log -1 $newrev --pretty=%ce`
    files=`git diff --name-only ${oldrev} ${newrev}  | grep -e ".java$"`
    echo $committer
    if [ -n "$files" ]; then
        TEMPDIR="tmp"
        for file in ${files}; do
            mkdir -p "${TEMPDIR}/`dirname ${file}`" >/dev/null
            git show $newrev:$file > ${TEMPDIR}/${file}
        done;

        files_to_check=`find $TEMPDIR -name '*.java'`

         java -Dpmd.language=en -cp /opt/gitlab/embedded/service/gitaly-ruby/git-hooks/p3c-pmd-2.0.1-jar-with-dependencies.jar net.sourceforge.pmd.PMD -d $TEMPDIR -R rulesets/ali-p3c.xml -f text -shortnames

         REJECT=$?
        echo "reject = "$REJECT
          if [ $REJECT = 0 ] ;then
            echo "恭喜你代码通过质量检测!"
    elif [ $committer = 'xxx@xxx.com' ]; then
      echo "在白名单中,临时允许通过"
            REJECT=0
          else  echo  "请及时修改代码并再次尝试!"
          fi

        rm -rf $TEMPDIR
    fi
done

exit $REJECT

需要关注

java -Dpmd.language=en -cp /opt/gitlab/embedded/service/gitaly-ruby/git-hooks/p3c-pmd-2.0.1-jar-with-dependencies.jar net.sourceforge.pmd.PMD -d $TEMPDIR -R rulesets/ali-p3c.xml -f text -shortnames

这个代码指定的规则文件ulesets/ali-p3c.xml是我们前面抽取出来的。如果你不需要单独抽取的话,可以指定p3c-pmd下的所有规则文件。
脚本的修改不需要重启gitlab,是实时生效的。一切OK,下面我们可以提交文件来测试下!!

测试

我们把一个java文件去掉@author的javadoc注释,我们坐git push的时候得到如下信息:

remote: Apr 10, 2020 11:08:36 AM net.sourceforge.pmd.PMD processFiles
remote: WARNING: This analysis could be faster, please consider using Incremental Analysis: https://pmd.github.io/pmd-6.15.0/pmd_userdocs_incremental_analysis.html
remote: src/main/java/com/example/demo/provider/MessageProviderImpl.java:15:    [MessageProviderImpl] should have @author javadoc
remote: reject = 4
remote: 请及时修改代码并再次尝试!
To http://localhost:32770/root/demo-provider.git
 ! [remote rejected] master -> master (pre-receive hook declined)
error: failed to push some refs to 'http://localhost:32770/root/demo-provider.git'

根据提示,修改,再次push:

remote: Apr 10, 2020 11:17:10 AM net.sourceforge.pmd.PMD processFiles
remote: WARNING: This analysis could be faster, please consider using Incremental Analysis: https://pmd.github.io/pmd-6.15.0/pmd_userdocs_incremental_analysis.html
remote: reject = 0
remote: 恭喜你代码通过质量检测!
To http://localhost:32770/root/demo-provider.git
   5d077e5..96cc722  master -> master

这样我们就完成了集成代码检查工具到gitlab的工作。
关于集成到gitlab的这段,我们参考了【如何生成整合了阿里巴巴JAVA编码规范的PMD包配合GitLab提升团队代码质量】这篇文章,但是可能是因为gitlab版本不同,我们做了简单的修改。这里也感谢@背包客要背包的分享

更近一步

但是提交再检测毕竟有些滞后,开发人员更多的时候想要再开发阶段就能够发现不符合规范的问题,ali-p3c规范有idea和eclipse插件,我们需要构建出独立的插件出来提供给开发使用。这个我们也在集成到gitlab的时候一起提供给了公司所有的开发同学。关于如何二开插件的话题我们下一章再继续讨论了,有兴趣的朋友也可以自己研究一样。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,233评论 4 360
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,013评论 1 291
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,030评论 0 241
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,827评论 0 204
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,221评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,542评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,814评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,513评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,225评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,497评论 2 244
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,998评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,342评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,986评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,055评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,812评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,560评论 2 271
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,461评论 2 266

推荐阅读更多精彩内容