swift-vapor socket编程之protobuf消息类型解决方案

最近在研究iOS socket编程,由于我的服务器是基于vapor2.0搭配最新腾讯云低配unbuntu 16.04系统,只有1M带宽,理论上传/下载速度可以达到128kb/s,需要用到protocol降低传输数据体积,节省带宽

什么是protocolbuf?

protocol buffer是google的一个开源项目,它是用于结构化数据串行化的灵活、高效、自动的方法,例如XML,不过它比xml更小、更快、也更简单。你可以定义自己的数据结构,然后使用代码生成器生成的代码来读写这个数据结构。你甚至可以在无需重新部署程序的情况下更新数据结构。

这些都不是重点,重点是基于protocol buffer传输的二进制数据体积小,是一般json的1/5,实测小数据只有json的1/3,大数据未测试

那么问题来了, 基于1M带宽,下载速度128kb/s,这里我理解为服务器同时给客服端发送数据每秒最大128kb,如果建立一个聊天室,假设可以同时容纳300人在线流畅聊天,使用json传输数据,保证不卡,那么使用protoco 传输数据最低可以保证在1000人以上同时在线聊天,并且不卡。在不提升带宽的情况下,是不是很给力。

具体文档和安装方法:https://github.com/google/protobuf

前往谷歌的protobuf github首页,上面有详细的安装过程,
因为我做的是swift服务器开发,所以前后端用的是apple官方开源的swift-protobuf

具体文档和安装方法:https://github.com/apple/swift-protobuf

好了,最后来说下,我在做socket编程中遇到的坑
使用protobuf传输数据,如何确定消息类型?

起初的解决方案是这样的:

var p = Person()
 p.id = 99
 p.title = "0.9.903"
p.author = "cailingyun"
let data = try! p.serializedData()
sendMsg(data)
func sendMsg(data : Data, type : Int) {
        // 1.将消息长度, 写入到data
        var length = data.count
        let headerData = Data(bytes: &length, count: 4)
        
        // 2.消息类型
        var tempType = type
        let typeData = Data(bytes: &tempType, count: 2)
        
        // 3.发送消息
        let totalData = headerData + typeData + data
        tcpClient.send(data: totalData)
    }

将消息的长度和消息类型转换成Data 然后一并拼接成data发送给服务器

ws.onBinary = { ws, data in
        var length : Int = 0
        let ms = data.array
        let headData = Data(bytes: ms, count: 4)
    
        (headData as NSData).getBytes(&length, length: 4)
        print(length)
        
        var type : Int = 0
        let typeArr = data.array as! NSMutableArray
        let t = typeArr.subarray(with: NSMakeRange(4,2)) as! [Byte]
        let typeData = Data(bytes: t, count: 2)
        
        (typeData as NSData).getBytes(&type, length: 2)
        print(type)
        
        let msgArr = typeArr.subarray(with: NSMakeRange(6,ms.count-6)) as! [Byte]
        let msgData = Data(bytes: msgArr, count: ms.count-6)
        let person =  try! Person(serializedData: msgData)
        print(p)
        
        let pdata = Data(bytes: data, count: data.array.count)
        room.send(data: pdata)
    }

然后解析的时候根据你自己当初设定的长度分别解析消息长度和消息类型,这个方案确实可以成功解析,但由于我的服务器是基于swift vapor 部署在Ubuntu,Ubuntu虽然安装swift3.0环境和vapor2.0环境,但并不支持Foundation,说明确点,是不支持NS系列,比如NSString,NSData等,既然不支持,那么上面的代码在Ubuntu上面就不会编译通过。
后来也是谷歌、百度找了很多方案,都不尽人意,没能解决
比如把Data转换成int,或者吧UInt8转换成Int等等,试了诸多方案都未能成功,这是我在Google找到的Data转Int,或者UInt8转int方案,在swift3.0中都已经不太适用,下面仅供参考

            For NSData:
            var values = [UInt8](repeating:0, count:data!.length)
            data.getBytes(&values, length: data!.length)
            
            For Data:
            var values = [UInt8](repeating:0, count:data!.count)
            data.copyBytes(to: &values, count: data!.count)
            
            let p = UnsafeMutablePointer<UInt32>.allocate(capacity: ((headData.count) / 4))
            let ptr = UnsafeMutableBufferPointer<UInt32>(start: p, count: ((headData.count) / 4))
            _ = headData.copyBytes(to: ptr)
            let contentLen = CFSwapInt32BigToHost(UInt32(p.pointee))
            print(contentLen)
            
            let value = UInt32(bigEndian: headData.withUnsafeBytes { $0.pointee })
            let value = Int(bigEndian: headData.withUnsafeBytes { $0.pointee })
            print(value)

            let bigEndianValue = headerArr.withUnsafeBufferPointer {
                ($0.baseAddress!.withMemoryRebound(to: UInt32.self, capacity: 1) { $0 })
                }.pointee
            let value = UInt32(bigEndian: bigEndianValue)
            print(value)

            var value : Int = 0
            for byte in headerArr {
                value = value << 8
                value = value | Int(byte)
            }
            print(value)

最终解决办法

syntax = "proto3";
message ProtocType {
   int64 ptype = 1;
}

syntax = "proto3";
message Person {
   int64 ptype = 1;
   string title = 2;
   string author = 3;
}

我新建了一个.proto文件,里面只有一个字段ptype,这个字段就是用来解析消息类型了,然后在你所有的proto文件中都加上这个字段,并且每次发送消息之前都要给这个字段赋值,这个字段就代表你的消息类型,比如是文件类型是1,图片类型是2,礼物消息是3,普通消息是4等

5ACBCCA9-49DF-43D6-BAEB-3E23EC32B2B5.png

然后服务器解析的时候,首先解析消息类型,用你刚才定义的解析消息类型的proto文件生成的.qb.swift文件里面的类去解析,
经过我的多次测试实验,解析很顺利,能够成功解析,确定消息类型,然后在用对应的类去解析对应的消息

以上就是在socket编程中使用protoc 传输数据确定消息类型方案,希望能帮到大家,少走弯路。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,117评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,328评论 1 293
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,839评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,007评论 0 206
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,384评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,629评论 1 219
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,880评论 2 313
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,593评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,313评论 1 243
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,575评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,066评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,392评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,052评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,082评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,844评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,662评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,575评论 2 270

推荐阅读更多精彩内容

  • 发现 关注 消息 iOS 第三方库、插件、知名博客总结 作者大灰狼的小绵羊哥哥关注 2017.06.26 09:4...
    肇东周阅读 11,614评论 4 59
  • 参考:http://www.jianshu.com/p/8c6c009bc500 http://blog.csdn...
    F麦子阅读 2,554评论 2 1
  • 目录Swift学习资料@完整App@App框架@ 响应式框架@ UI@ 日历三方库@下拉刷新@模糊效果@富文本@图...
    IOS开发攻城狮_Fyc阅读 6,204评论 1 90
  • 由于工程项目中拟采用一种简便高效的数据交换格式,百度了一下发现除了采用 xml、JSON 还有 ProtoBuf(...
    黄海佳阅读 48,020评论 1 23
  • 转载自:https://github.com/Tim9Liu9/TimLiu-iOS[https://github...
    香橙柚子阅读 8,120评论 0 35