2019-01-03

联盟工程算力大解析

全国机房、机柜数量统计

经由技术人员统计:

全国数据机房总量为:542家

各省市分布比例如下:


经测算,在全国542家数据机房中,共设有893758架机柜。


专家解析:根据技术人员抓取结果显示,我国IDC数据机房约有20%空置率。意味着全国近90万架机柜中,约有18万架机柜处于闲置状态。机房资源充足,但未得以有效利用。


技术人员据此估算:倘若将全国约18万空闲机柜全部整合,算力强度将达到前所未有的峰值。

 

 

机房、机架利用率


专家解析:结合机房的类型与规模,可以看到利用率在30%以下的数据中心占10%,30-50%的占29%,50-80%的占31%,80%以上的占30%。



使用年限与机架利用率

 

专家解析:依图所示,越大的数据中心,机房利用率越高。出租托管的数据中心,机房利用率明显高于其他类型。



使用年限与发电时间

专家解析:投产3年以上的数据中心,其发电机启用时间超过10小时的比例大幅增加。



故障中断情况

专家解析:上图显示,有62%的数据中心没有发生因故障中断业务,有6%发生过1小时以内的故障中断,38%的数据中心发生了超过1小时的故障中断。

经分析,以上统计折算为可用性:不到99.99%的数据中心发生过3次以上故障中断。


电量大幅提升


据统计,全国数据中心目前1KW以下耗电量占6%,1-3KW占35%,3-5KW占45%,5KW以上占14%;

技术人员预测,未来所需机柜功率:3KW以下占17%,3-5KW占51%,5-8KW占28%,8KW以上占4%。

专家解析:用电量的提升,为数据中心的建设和运营带来巨大挑战。无论是初始投资,亦或运营成本,势必大幅增加。该问题需重点关注。

问&答

——一个数字社区每秒将产生多少数据量?


消费者产生的消费信息,是包括心跳频率、触摸商品的次数、各类问询记录、交易记录等数据的汇总;

每一节点、每秒钟将产生海量数据流。

 为了让结果更加精确、直观,我们将消费行为拆解,以其中一个动作为例:

技术人员随机抓取某一动作片段;

经测算,该片段每人每秒约产生10M数据量;

每家数字社区最多容纳人数10000人,那么每秒将产生:

10M×10000=100G数据量


——全国闲置机柜可放置多少台服务器?


经技术人员统计,全国共有约90万架机柜

以机柜闲置率约20%计算,全国闲置机柜量约为:

900000架×20%=18万架

经检测,每架机柜可放置8台服务器,全国闲置机柜共可放置:

180000×8台=144万台服务器

——我们需要多少台服务器?


我公司共有数字社区17万家;

每家社区最高容纳人数为1万人

为判断具体需求,技术人员以某大型支付公司算力为借鉴,模拟10000人并发情景:

测试结果显示,一万人每秒约产生100G数据量;

结合服务器性能考虑,需要8台现有能力的服务器方可正常运行;

根据上述测算,于我公司而言,17万数字社区共需要:

170000×8台=136万台服务器


——全国闲置服务器数字社区所需服务器数量对比


在上述测算中,我公司数字社区需要的服务器数目:136万台

全国闲置机柜可放置服务器数目:144万台

结果表明,全国闲置机柜可以满足我公司架设服务器需要。

据此得出结论:整合全国闲置机房算力,以分析万人并发的消费数据计划切实可行。

可以看到,全国数据中心数量充足,且闲置率较高,其算力远未达到饱和状态。我公司工程所需算力,与全国闲置资源高度契合,让整合全国闲置算力的愿景有望付诸现实。只有获取强大的算力支持,才能从目前井喷式海量数据中筛选出有价值信息,进而建立起高效、精准、完备的大数据决策模型。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,233评论 4 360
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,013评论 1 291
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,030评论 0 241
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,827评论 0 204
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,221评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,542评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,814评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,513评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,225评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,497评论 2 244
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,998评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,342评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,986评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,055评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,812评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,560评论 2 271
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,461评论 2 266

推荐阅读更多精彩内容

  • SpringMVC 一. SpringMVC 是什么 SpringMVC是Spring家族中的一个 web 成员,...
    jones_lu阅读 257评论 0 0
  • 特征选择与特征工程 特征工程是机器学习的第一步,涉及清理现有数据集、提高信噪比和降低维数的所有技术。大多数算法对输...
    老Q在折腾阅读 4,675评论 0 1
  • 昨天看了一条微博,大概内容是这样的,“我抽烟我喝酒我纹身我去夜店,但我是个好姑娘,我知道谁才是真正的碧池。” 我始...
    讲故事的Hickey阅读 220评论 0 2
  • 我国基础教育课程改革运动的核心理念是为了每一位学生的发展。具体而言,是确立培养“完整的人”的课程目标;构筑...
    何泉_1ec8阅读 438评论 0 1
  • 每天都看到先森在看说车的直播,就觉得好奇这直播到底是个什么东东,怎么就这么的吸引人呢。我也下载了一直播,只是想探个...
    麦唛果阅读 173评论 0 0