云在起时:宿迁观京东云数据中心随想之“地利”四优势

京东自建数据中心有哪些考虑?

有多少服务器?

京东云是不是迟到了?

有必要定制服务器么?

一个月前,我和家人去长隆野生动物园游玩,突然接到一个显示来自宿迁的电话。

就像一位朋友说的,这年头,座机拨来的十有八九是骚扰电话。略有犹豫,我还是接了。

对方自报家门,说是京东的客服。这下我突然意识到,东哥就是宿迁人啊!把客服安排在非一线城市,是很合乎情理的。来电是告知我昨天在京东退掉一个智能电源插座的快递费回款事宜,态度也很好,各方面证据都显示这不是一个诈骗电话。

现在我担心的不是这个,而是在选择退掉之后,马上又买了一个,因为这个也和介绍内容不符,对非官方苹果充电线的兼容性不好。我打算再度退货,又寻思会不会因此上黑名单。

我自信不会啦,每回为了凑单,都买了不少生活必需品,只是退掉两个不合用的插座而已。在这个言必称大数据的时代,不用太复杂的分析,结合我多年来的购买记录,不难知道绝非一个恶意用户。

然而,有老司机告诉我,上了京东的黑名单,不代表就不能再买东西,但会有限制领券及抢购(如秒杀)等惩罚措施。我这人不好凑热闹,从不参与秒杀,能继续领券就行了。

结果,我不仅没上黑名单,还来到了京东在宿迁的数据中心——618将至,无论分析还是秒杀,都需要强有力的数据中心支撑。

说来有趣,我知道刘强东是宿迁人,就是因为听说京东要在宿迁建一个数据中心。这和我知道李彦宏是阳泉人,竟是同样的套路……

来到宿迁才知道,原来这里是项羽的故乡

现在京东的数据中心基本布局是北上广,在华北、华东、华南三个地区各有一些主力机房。位于宿迁的这个数据中心,就是京东华东区的主力机房,也是京东第一个自建的数据中心。第一次自建的用时总会比较长,腾讯和百度如此,而京东云华东数据中心设计于2013-14年间,今年3月1日开始部分投入运营,可以算很快的了。

至于……为什么是宿迁?见不到东哥本尊,总不能去问西楚霸王有没有钦定的感觉哈?不如静下心来,看看数据中心建在宿迁有哪些“地利”。

由于我国人口分布明显不均衡,大型互联网公司(如BAT)已经投入使用的数据中心,几乎都位于“胡焕庸线”(黑河腾冲线)的右侧,即人口密集的东部及南部区域。要说离用户最近,莫过于北上广深等地,然而这些大城市早已不堪重负,在电力和土地供应诸方面受到的限制也是最多的,后来者再想建设大型数据中心,可谓难上加难。

左侧为胡焕庸线示意图,右为宿迁在江苏的位置(苏北的“苏”字下面,图片来自网络)

巧合的是,从经济发展的角度来看,江苏省存在着类似的不均衡现象:位于东部的苏中和紧邻上海的苏南地区经济发达,而位于西北部的苏北地区则相对欠发达。放大到全国,宿迁的地理位置类似于内蒙古呼和浩特(三大运营商都有大型云计算数据中心)和宁夏中卫(AWS建有大型数据中心),距上海与呼和浩特到北京大致相当,距天津与中卫到西安大致相当,有点闹中取静的意思——毕竟只是在苏北而不是西北嘛。

绕了这么大的圈子,究竟有哪些好处?不妨一项项来看

地大

京东云华东数据中心位于江苏省宿迁市湖滨新区,园区总占地面积达13万平方米(200亩),整体由4个规模相当的云数据中心模块和1栋综合大楼组成,每个模块建筑面积12332平方米,总建筑面积55328平方米。

4个模块均为单层建筑,即使层高较高(7.5米,内部工作区空间净高约4米)而可以计为两层,容积率也小于1,这在一二线城市是很难争取到的,体现了宿迁作为“四线城市”的优势。

服务器等设备可沿斜坡经此门推入机房模块

单层建筑大大简化了数据中心建设和部署的要求:

  • 服务器和机柜等设备不受电梯限制,可直接推入机房,安装部署效率高;
  • 建筑物结构强度不用太高。宿迁机房采用地板下送风设计,承重仍可达到每平方米1吨。即使未来要扩大承重能力,也不像多层建筑那样需要考虑楼板和支撑的加固。

某正在用钢筋加固的多层机房

架多

顺应模块化的潮流,4栋机房模块独立实施,互不影响,可实现分期建设,第1栋机房模块及综合大楼已投产运行,其余模块将于2017年陆续投产。

右侧为一栋机房模块

模块内部的数据机房和配电室也由相同的小模块组合而成,可根据使用需求灵活布置、调整模块内容。每个模块包括10个机房,分为4个低密、3个高密、1个微模块和2个网络。

  • 高密机柜主要面向互联网应用(如京东云),供电可达12KW(千瓦);
  • 低密机柜主要面向政府、托管等应用,典型如4KW;
  • 我看到的微模块一面有16个机柜,据称每机柜供电8KW;
  • 网络方面,电信和联通已入驻,未来以联通为主。

4栋机房楼(数据中心模块)容纳机柜总数量超过5000架,“可承载20万台服务器”——引号是我加的,因为这显然是按照每机柜40台服务器算出来的理论值。

微模块内景

5000个机柜,如果全部使用2U机架式服务器,能达到10万台就不错了;全部使用1U服务器,可以超过15万台;20万台就要考虑2U4、1U2、刀片式服务器等机型了,还得考虑分配到机柜的供电能力。

电足

京东提供的资料显示:宿迁处于“西电(气)东输和年发电量140亿度的田湾核电站的高压走廊,能源及电力供应充足,具有高质量的输电网络和充裕的供电能力。”

具体到宿迁数据中心,自建了纯双路110KV专用变电站。一般来说,110KV变电站的供电容量可达60MVA,理论上存在5000个机柜都达到12KW的潜力。

每栋机房楼配置2200KW发电机组作为后备电源,具备连续满载12小时的运行能力。具体说来,共8台柴油发电机,分布于两个房间,N+1配置,45秒启动,90秒到末端负载。加上高压直流UPS提供15分钟延时,构成三重供电保障。

之前流出的宿迁数据中心效果图。京东有考虑过机房模块顶部安装光伏发电装置,但是发电量太少,所以没有实施。中间的综合大楼顶部设有太阳能热水器

水丰

“宿迁属暖温带季风性气候,气候温和宜人,雨量适中,四季分明。一年最高气温35.5℃,最低气温-12.1℃,平均气温14℃。区内地表水系十分发达,河渠纵横,以京杭大运河为主要水运通道,水位一般在9~9.5米。宿迁地处淮河和沂沭泗两大水系下游,境内河湖交错,拥有10条流域性河道、39座小水库,水域面积达350万亩。”

宿迁数据中心采用市政双路供水,几公里之外就是骆马湖。700冷吨离心冷水机组为N+1配置,蓄冷罐蓄冷时间15分钟。在外部条件适宜的时候,通过设置在机房楼顶部的冷却塔实现水侧自然冷却,达到节能降耗的目标。

不同颜色的水管和远端的板式换热器

京东云华东数据中心的能耗目标是PUE<1.4,由于3月1日才投入运营,京东云4月开始对外提供服务,暂时只有几百台客户的服务器在运行,少量负载情况下的PUE不具参考意义,也没有足够时间衡量水侧自然冷却的具体贡献。

#插入扯淡时段

甲:反正带宽也是从运营商来的,客户为什么不直接用运营商的数据中心呢?

乙:不够fashion。

丙:怎讲?

乙:在年轻人中,王思聪和王健林,谁更受欢迎?

#扯淡时段结束

消防采用IG541气体灭火系统,IG541灭火剂由52%氮、40%氩、8%二氧化碳三种气体组成,无色、无味、无毒、不导电,在大气中存留的时间很短,是一种绿色环保型灭火剂

如京东云首席架构师杨海明所说,整个苏北需要发展经济,在这个地方没有高品质的机房。这可以部分解答扯淡时段提出的问题,但京东显然不是IDC服务商,“京东云华东数据中心 ”名明白白,还是应该主要满足京东云的需求。

杨海明表示,京东云现在服务的客户主要是三大类:

  1. 标准的互联网客户,如创业型公司直接租用云主机;
  2. 交易型客户,有电商特性;
  3. 国企、央企或传统企业转型,特别是线下转线上。

后两类京东都有切身的经验,并列举了一家国有企业客户、民营企业郑州河南皮鞋批发市场、京东与北京亦庄锋创科技园合作的案例,说明京东云在帮助企业升级转型中起到的作用。

按照京东的说法,京东云的历史不算短,在今年3月份之前主要服务内部的京东商城的业务,正式对外提供服务是今年4月的事,恰逢3月第一个自建数据中心投入运营。可以说是个巧合,但公有云服务与数据中心建设之间,也确实有比较紧密的关联,以下三个问题或许能带给大家一些启发。

如果引用本站的原创文章,请注明原文链接:,本站保留追究责任的权利!

发表评论