高性能异步RPC框架 kiss-rpc-flatbuffer介绍和测试

kiss-rpc特性:

  1. 轻量级,简单易用。支持idl和手动编写协议两种方式。模拟函数式调用方式,更加符合rpc远程调用方式。
  2. 易修改易使用,已有的代码可以直接发布使用
  3. 数据格式支持向下兼容,采用flatbuffer协议,兼容性更好,速度更快。
  4. 支持多值返回特性,支持超时机制,类比grpc,thrift,dubbo快几倍甚至 几十倍。
  5. 支持snappy压缩算法,压缩速度,性能优越。
  6. 支持管道数据压缩,动态数据压缩,请求式数据压缩,运用场景灵活广泛。
开发环境

IDL介绍和使用说明:

关于kiss-rpc使用的压缩方式

  • 数据压缩:使用google snappy压缩技术, 支持强制压缩和动态压缩方式,灵活的压缩方式能够运用于各种场景。
  • 动态压缩技术: 当数据包大于200字节或者设定的阈值的时候,会压缩数据包,否则不压缩数据包,有助于空间的利用和性能的提升,response也会根据请求是否需要动态压缩数据。
  • 单请求压缩:对于单个request请求进行压缩,response也会根据请求的数据包压缩方式进行压缩。
  • 管道压缩: 可对指定的管道进行数据包压缩。
待开发
  • 数据加密: 使用多证书加密和单证书加密,更加安全。
  • 负载均衡,反向代理:主动发现服务器,动态感知集群状态。

kiss rpc 同步和异步测试:

  • 环境:ubuntu 16.04 lts(64位)
  • 硬件:xeon cpu e3-1230@3.3GHz x 8
  • 内存:8G
  • 网络:localhost(本地环回)
59582266.png

kiss rpc flatbuffer版本测试:

  • 单连接 100w QPS同步测试,耗时:20秒,平均每秒5w QPS
  • 单连接 100w QPS异步测试, 耗时5秒,平均每秒20w QPS
59682393.png
1000并发异步测试
  • 1000并发, 100wQPS异步测试, 耗时:5秒,平均每秒QPS:20W
59698927.png

其他rpc性能对比 测试:(http://blog.csdn.net/jek123456/article/details/53395206)

**
** 海量互联网业务系统只能依赖分布式架构来解决,而分布式开发的基石则是RPC;本文主要针对两个开源的RPC框架(gRPC、 Apache Thrift),以及配合GoLang、C++两个开发语言进行性能对比分析。*

  • 测试场景client, server都是单进程,长连接,在单次连接内发起1w(5w)次rpc调用,计算耗时;
    client, server都是单进程,短连接,共发起1w(5w)次连接,每次连接单次RPC调用,计算耗时;
    并发4个client进程,每个进程长连接10w rpc,服务端单进程多线程(协程),计算耗时;

  • 由于不同语言,耗时统计存在偏差,比如boost.timer在程序里计算出来的耗时明显偏小,所以统一使用linux命令time来计算耗时;

1.单进程下,长短连接,两个RPC框架和两大语言对比
1846c0c8-42c3-4b40-b188-d6c024f94d34.png
6bcf041a-1779-494b-a543-ec34dafa4069.png
  • 小结:
    整体上看,长连接性能优于短连接,性能差距在两倍以上;
    对比Go语言的两个RPC框架,Thrift性能明显优于gRPC,性能差距也在两倍以上;
    对比Thrift框架下的的两种语言,长连接下Go 与C++的RPC性能基本在同一个量级,在短连接下,Go性能大概是C++的二倍;
    对比Thrift&C++下的TSimpleServer与TNonblockingServer,在单进程客户端长连接的场景下,TNonblockingServer因为存在线程管理开销,性能较TSimpleServer差一些;但在短连接时,主要开销在连接建立上,线程池管理开销可忽略;
    两套RPC框架,以及两大语言运行都非常稳定,5w次请求耗时约是1w次的5倍;
2.多进程(线程,协程)下,两大RPC框架和两大语言对比
8b632946-5b54-4552-a1b2-898c5f1441cd.png
6fda7744-ec65-48b8-ae72-3ba2cb73b5c2.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,835评论 4 364
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,598评论 1 295
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 109,569评论 0 244
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,159评论 0 213
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,533评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,710评论 1 222
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,923评论 2 313
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,674评论 0 203
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,421评论 1 246
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,622评论 2 245
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,115评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,428评论 2 254
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,114评论 3 238
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,097评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,875评论 0 197
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,753评论 2 276
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,649评论 2 271

推荐阅读更多精彩内容