抖音、百度、阿里云、腾讯都是自建数据中心,都是T级出口带宽(总出口带宽),即1T=1024G/s的出口带宽。一般的服务器管理基本都在20万多台,甚至阿里云也有100万台以上。
字节跳动数据中心的总带宽可能在10TB左右,距离15TB的预期突破也不远了。
一般情况下,总出口带宽为1TB,机房实际出口带宽可能只有100G。这是双(多)链路设计。双出口实现动态流量共享,总出口带宽可达T级。
想要亿万人同时在线,TB级带宽、CDN加速、多节点、负载均衡等技术缺一不可。 (这个设计技术太复杂了,如果有相关专业的朋友可以评论一下,简单概括一下。)
字节跳动有多少台服务器?
根据网络数据,2017年有2万到3万台服务器,此时主要使用租用的服务器。 2018年,字节跳动建立了自己的数据中心。最大的数据中心在河北怀来官亭湖新媒体产业园,一期5万台服务器。第二阶段 90,000 台服务器。
2018年租用+自建服务器数量达到17万台。
2020年,根据字节跳动招聘公告的数据,有42万台服务器。 1.是2018年的5倍。(数据来源于网络)
这部分服务器在国内使用,主要用于国产抖音、西瓜视频、今日头条、飞书等产品。
TIKTOK在美国是独立运营,数据在美国本地存储和分发。
TIktok 2020 年还在美国租赁了近 10 万台服务器
根据Business Insider公布的数据,2020年上半年,字节跳动在美国弗吉尼亚州北部租用了能耗53兆瓦的数据中心。可容纳数十万台服务器,占地面积高达数十万平方英尺。
Tiktok 正在印度和新加坡投资数据中心。
说完了服务器数量,再来说说硬核的东西:字节跳动大数据中心的出口带宽是多少?
知识点:所谓出口带宽,其实就是普通人所说的下载带宽。它是服务器向每部手机分发数据的总速度。 《Spring Boot学习笔记》分享给大家。
一般情况下,小型IDC公司自建机房,比如一些网站公司从中国联通、中国移动、中国电信租用机房,整体出口带宽可能只有5G。 30G以上是有一定规模的公司。网络公司营收不到千万企业。
因此,经常看到一些规模不错的企业,基本不再自建机房,而是使用云主机。比如阿里云的ECS、腾讯云、百度云、AWS(亚马逊)。
一般企业网站(企业官网),20M带宽,4G内存,100G硬盘,一年4000-5000元的价格就够了,赶上活动价可能会更便宜。
带宽是最昂贵的。当然,将带宽提高到一定水平。例如,如果访问量增加刷抖音视频网站,则需要增加内存和硬盘。相反,如果增加带宽,成本会更昂贵。 【这里给大家解释一下:带宽比较贵,是稀缺资源】
我们来看看中国移动的一个机房:中国移动(河北石家庄)数据中心的数据:
占地174亩,总建筑面积13万平方米。规划建设10栋单体建筑,全部建成后可提供约30,000个机架的装机容量。三个IDC机房可提供3.10000架机柜和15T带宽资源。
在一个机柜中,全1U设备数量一般不超过16个刷抖音视频网站,全2U设备一般不超过12个,全4U设备一般不超过4到7个。
我们把高性能的2U和4U服务器拿来平均折中,各占一半(毕竟移动也算有钱大户,买不到低端的1U设备)。那么3.可以安装10000个机架,最多210000-360000台服务器。
这是一个粗略的平均值:300,000 台服务器。享受15T出口带宽资源。当然,作为电信的骨干网络,移动带宽资源肯定比字节跳动更有优势。
所以,我们粗略估计字节跳动自建的数据中心有 17 万台服务器。总出口带宽可能在 7Tb-10TB 左右。基本上会采用双出口流量设计,再加上多链路的部署方式:实际出口带宽可以是800G-1TG,总出口带宽可以达到10T左右。 [这是一种技术方式]
T级出口带宽是什么概念?如果我告诉你,2009年整个上海的出口带宽只有1140G,刚刚达到1TB。短短10年,企业数据中心的出口带宽就超过1Tb,真是难以想象。
要知道,2009年虽然智能手机还不发达,但个人PC销量已经非常大了。
CDN加速,让公众刷抖音看视频不卡顿
知识点:CDN(Content Delivery Network,内容分发网络)
将服务端的内容发布到离用户最近的边缘节点,方便用户就近获取想要的内容。
解决Internet网络拥塞问题,提高用户访问网站的响应速度。各种加速解决方案的集合。
用通俗的话来解释CDN就是有的页面会被专门压缩,有的会被压缩成静态页面,静态页面会快速分发。用户可以在2s内看到内容,体验更好。 【这是静态传输】
对于动态视频,首先通过智能路由,找到最佳路径,然后协议优化会压缩长连接和内容,去除冗余。 [这是动态压缩]
看看腾讯 2015 年 5 亿日活跃用户,CDN 级别,集音乐、即时通讯等产品于一体,带宽达到 10TB。每天有数万亿个请求。
所以,我这里说字节跳动整体服务器10TB应该不算多。毕竟抖音有6亿的DAU,而西瓜视频+今日头条大概有2亿,总共有8亿的DAU。
就是这么大的带宽和技术实力,让我们看视频这么流畅。