学习用MetalPerformanceShaders进行图像处理

iOS9在MetalKit中新增了MetalPerformanceShaders类,可以使用GPU进行高效的图像计算,比如高斯模糊,图像直方图计算,索贝尔边缘检测算法等。我最近刚开始学习Metal的使用,并做了一个高斯模糊的例子作为"HelloWorld"程序,下面分享一下我的学习成果~

注意:运行该程序需要有一个系统版本为iOS9的iOS设备,因为Metal只能在真机上运行。

首先建立工程:

屏幕快照 2015-10-03 上午10.54.16.png

ViewContoller.swift文件中导入需要的framework:

import MetalKit
import MetalPerformanceShaders

如果出现未识别的错误不要担心,把你的设备选到iOS Device而不是模拟器,错误就会消失。
导入需要的资源图片到工程里:

AnimalImage.png

只要拖到工程文件夹中就可以了,不需要拖入Assets.xcassets中:

屏幕快照 2015-10-03 上午11.05.07.png

打开Main.storyboard,拖一个UISlider进去,这个用来控制高斯模糊的半径。
最大值设为100:
屏幕快照 2015-10-03 上午11.08.04.png

设置好约束:

屏幕快照 2015-10-03 上午11.09.22.png

屏幕快照 2015-10-03 上午11.09.36.png

屏幕快照 2015-10-03 上午11.09.50.png

最后类似于这样:

屏幕快照 2015-10-03 上午11.10.49.png

ViewContoller.swift文件中拖一个outlet,用来获取模糊半径:

屏幕快照 2015-10-03 上午11.13.57.png

还有一个valueChanged的监控方法,用来实时改变模糊效果:

屏幕快照 2015-10-03 上午11.14.26.png

背景设置为黑色:

屏幕快照 2015-10-03 下午2.51.24.png

然后开始配置我们Metal代码,首先了解一下MetalPerformanceShaders的使用流程:

  1. 配置MTKView用来承载模糊的结果
  2. MTKView创建新的命令队列MTLCommandQueue
  3. 读取资源数据,创建MTLTexture,作为高斯模糊的数据源。
  4. 创建高斯模糊对象
  5. 运行高斯模糊,并绘制结果到MTKView
    了解了需要哪几步之后我们正式开始写代码,首先添加一些需要的变量:

    var metalView: MTKView!
    
    var commandQueue: MTLCommandQueue!
    
    var sourceTexture: MTLTexture!
    

使ViewController遵循MTKViewDelegate协议:

class ViewController: UIViewController,MTKViewDelegate{
.........
}

实现它的两个代理方法:

  func drawInMTKView(view: MTKView) {
        
    }
    func mtkView(view: MTKView, drawableSizeWillChange size: CGSize) {
        
    }

第一个方法用来绘制我们的MTKView,第二个方法在MTKView的可绘制区域改变时会调用。

新建一个方法func setUpMetalView()来配置MTKView,添加以下代码:

    func setUpMetalView(){
        //设置metalView大小,边框等属性
        metalView = MTKView(frame: CGRect(origin: CGPointZero, size: CGSize(width: 300, height: 300)))
        metalView.center = view.center
        metalView.layer.borderColor = UIColor.whiteColor().CGColor
        metalView.layer.borderWidth = 5
        metalView.layer.cornerRadius = 20
        metalView.clipsToBounds = true
        view.addSubview(metalView)

        //读取默认设备.
        metalView.device = MTLCreateSystemDefaultDevice()
        
        //确保当前设备支持MetalPerformanceShaders
        guard let metalView = metalView where MPSSupportsMTLDevice(metalView.device) else {
            print("该设备不支持MetalPerformanceShaders!")
            return }

        //配置MTKview属性
        metalView.delegate = self
        metalView.depthStencilPixelFormat = .Depth32Float_Stencil8
        
        // 设置输入/输出数据的纹理(texture)格式
        metalView.colorPixelFormat = .BGRA8Unorm
        
        //将`currentDrawable.texture`设置为可写
        metalView.framebufferOnly = false
    
    
    }

新建一个方法func loadAssets(),用来加载资源数据等操作:

 func loadAssets() {
        // 创建新的命令队列
        commandQueue = metalView.device!.newCommandQueue()
        
        //设置纹理加载器
        let textureLoader = MTKTextureLoader(device: metalView.device!)
        //对图片进行加载和设置        
        let image = UIImage(named: "AnimalImage")
        //处理后的图片是倒置,要先将其倒置过来才能显示出正图像
        let mirrorImage = UIImage(CGImage: (image?.CGImage)!, scale: 1, orientation: UIImageOrientation.DownMirrored)
        //将图片调整至所需大小
        let scaledImage = UIImage.scaleToSize(mirrorImage, size: CGSize(width:600, height: 600))
        
        let cgimage = scaledImage.CGImage
        
        
        // 将图片加载到 MetalPerformanceShaders的输入纹理(source texture)
        do {

            sourceTexture = try textureLoader.newTextureWithCGImage(cgimage!, options: [:])
    
            
        }
        catch let error as NSError {
            fatalError("Unexpected error ocurred: \(error.localizedDescription).")
        }
    }

这里我们自定义了一个UIImage的类方法,在UIImageextension中添加这个方法:

extension UIImage{
    
    class func scaleToSize(image:UIImage,size:CGSize)->UIImage{
        UIGraphicsBeginImageContext(size)
        image.drawInRect(CGRect(origin: CGPointZero, size: size))
        
        let scaledImage = UIGraphicsGetImageFromCurrentImageContext()
        UIGraphicsEndImageContext()
        return scaledImage
        
    
    }

}

viewDidLoad方法中调用这两个方法:


        setUpMetalView()
        loadAssets()

到了最后一步了~在drawInMTKView(view: MTKView)方法中绘制我们的metalView:

 func drawInMTKView(view: MTKView) {
       //得到MetalPerformanceShaders需要使用的命令缓存区
       let commandBuffer = commandQueue.commandBuffer()
       
       // 初始化MetalPerformanceShaders高斯模糊,模糊半径(sigma)为slider所设置的值
       let gaussianblur = MPSImageGaussianBlur(device: view.device!, sigma: self.blurRadius.value)

       // 运行MetalPerformanceShader高斯模糊
       gaussianblur.encodeToCommandBuffer(commandBuffer, sourceTexture: sourceTexture, destinationTexture: view.currentDrawable!.texture)


       // 提交`commandBuffer`
       commandBuffer.presentDrawable(view.currentDrawable!)
       commandBuffer.commit()
   }

我们在每次滑块滑动后重新绘制metalView:

@IBAction func blurRadiusDidChanged(sender: UISlider) {
        metalView.setNeedsDisplay()
    }

然后应该就可以运行了~结果如下:

运行结果

当然真机效果比这个要好很多,插上手机亲自试一下吧~

本文章源代码下载:

github地址

如果本篇文章对你有帮助,请点一下喜欢!您的支持是我继续写作的动力~

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 160,999评论 4 368
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 68,102评论 1 302
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 110,709评论 0 250
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,439评论 0 217
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,846评论 3 294
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,881评论 1 224
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 32,062评论 2 317
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,783评论 0 205
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,517评论 1 248
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,762评论 2 253
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,241评论 1 264
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,568评论 3 260
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,236评论 3 241
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,145评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,941评论 0 201
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,965评论 2 283
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,802评论 2 275

推荐阅读更多精彩内容