Android图片变老方案总结

思路:

1. 面部皱纹纹理。变老后的皱纹并不是实时绘制,而是需要先准备一系列皱纹纹理,然后将皱纹纹理和正常面部纹理融合。

 2.由于检测的人脸姿态多变,有的头正颈直,有的歪头,有的仰头,而皱纹纹理都是头正颈直的,所以还需要对皱纹纹理做合适的变形,而非旋转,旋转的话匹配精度不够。本文采用的是移动最小二乘法图像变形(mls)算法。

 3.由于涉及到mls变形算法,所以需要控制点。本文采用的是提取人77个特征点,由于标准77个特征点主要分布在脸颊、眉毛、眼睛、鼻子、嘴巴,为了保证变形更精准,所以又计算增补了部分额头控制点,共计77个特征点作为变形控制点。

步骤:

1.准备几张面部皱纹的图,并标注人脸特征点


面部皱纹图人脸关键点,一共81个点

public static final float[] OLD_FACE = {62.0f, 296.0f, 62.0f, 362.0f, 76.0f, 430.0f, 97.0f, 505.0f, 133.0f...........};

人脸关键点位置分布图


人脸关键点采集

人脸关键点识别一般可以采用Dlib或者 Stasm + OpenCV,

使用Dlib的话可以参照face_landmark_detection 来获取人脸68个关键点,不依赖于OpenCV,但是需要61M的模型文件,同时也没有额头部分的标注。

使用Stasm可以参考示例minimal 使用它可以获取77个人脸关键点, 只需要OpenCV的几个xml的模型文件, 体积比dlib的模型小,比较适合移动端设备使用,所以我选择了这个。

SeetaFace2也是一个可行的方案,可以参考SeetaFace2 可以实现人脸81个关键点识别,不依赖于OpenCV,效果也不错,不过相比于Stasm,SeetaFace2不会标注人额头上的关键点。


最小二乘法

最小二乘法(又称最小平方法)是一种数学优化技术。它通过最小化误差的平方和寻找数据的最佳函数匹配。利用最小二乘法可以简便地求得未知的数据,并使得这些求得的数据与实际数据之间误差的平方和为最小。最小二乘法还可用于曲线拟合。其他一些优化问题也可通过最小化能量或最大化熵用最小二乘法来表达。


在图像处理领域paper:《Image Deformation Using Moving Least Squares》利用移动最小二乘的原理实现了图像的相关变形,而且这篇paper的引用率非常高,可以说是图像变形算法的经典算法,Siggraph上面的paper。


变老实现

1.   通过OpenCV+Stasm获取原始图像人脸关键点数据


2. 将图片切割成若干个网格,得到原始网格点


3.最小二乘法,得到变形后的网格点


最小二乘法,输入:

原始网格点:将图像切割成areaW * areaH 的网格区域

控制点:就是上面提供的81个人脸关键点。

目标控制点:原始图通过stasm得到的的人脸关键点。

输出:变形后的网格点

4.现在我们已经有了原始网格点、变形后的网格点,接下来就计算顶点纹理坐标和绘制索引,使用VBO绘制图元,绘制出经过变形的老人皱纹图,然后与原始图融合,得到最终变老效果。

4.1计算顶点数据


4.2计算绘制索引


4.3创建FloatBuffer和ShortBuffer,供后面使用


5.融合,变老shader

可以看到有两个2d 纹理

inputImageTexture:代表原图纹理

inputImageTexture2 :代表变形后的皱纹纹理


这一步就是对两层进行融合计算,内建函数mix混合,intensity代表皱纹透明度

mediump vec4 outputColor = vec4(base.rgb * (overlay.a * (base.rgb / base.a) + (2.0 * overlay.rgb * (1.0 - (base.rgb / base.a)))) + overlay.rgb * (1.0 - base.a) + base.rgb * (1.0 - overlay.a), base.a);\n"

6、VBO绘制


5.最终效果



©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 162,710评论 4 376
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 68,839评论 2 308
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 112,295评论 0 255
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,776评论 0 223
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 53,198评论 3 297
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 41,074评论 1 226
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 32,200评论 2 322
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,986评论 0 214
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,733评论 1 250
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,877评论 2 254
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,348评论 1 265
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,675评论 3 265
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,393评论 3 246
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,209评论 0 9
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,996评论 0 201
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 36,212评论 2 287
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 36,003评论 2 280