短视频数据中心存储架构解决方案
行业简讯
随着互联网内容的持续更新与迭代,短视频已迅速取代文字和图片,成为人们工作和生活之余消磨碎片时间的主要方式。
在短视频业务迅猛扩张的背后,是多种技术的不断革新与进步,包括移动终端性能的显著提升、移动网络的加速发展,
当然还有后端计算平台的日益强大与稳定。当我们从看图时代转向视频时代时,数据中心又需要经历怎样的变革
以适应这些新的业务应用呢?
每月需要存储PB级别的数据视频,相比文字和图片,所需的存储空间更大。以国内某短视频平台公开的数据为例,仅从存储的视频容量来看,平台每月新增的短视频容量就超过1PB。按照单块硬盘8TB、每台服务器配置12块硬盘来计算,每月为了存储这些视频就需要新增12台服务器。
视频行业的数据具有一个显著特点:热度分布不均且变化迅速。大部分上传的视频仅在短时间内保持高热度,通常不超过一周。在数据中心,热数据、温数据和冷数据分别占总数据量的5%、15%和80%。冷数据,又称“低价值度数据”,占据了大部分存储空间,却很少再被访问。尽管这些数据的价值较低,平台仍需确保它们不被删除,如何安全且低成本地保存这些数据成为一个亟待解决的问题。
解决方案
计算与存储分离,各司其职
短视频背后的数据中心架构其实并不是特别复杂,从视频采集端到客户端,编解码、用户特征分析由专门的计算节点完成;CDN节点负责热点视频的缓存加速和分发;高密度的存储节点用于存储平台的视频数据。

鲲林 KLS-IS3-D 是一款专为存储密集型应用设计的服务器, 支持两颗第3代英特尔至强可扩展系列处理器,
最高可达205W TDP, 提供24个前置3.5英寸HDD 仓位(同时兼容2.5英寸HDD/SSD)
可选配后置12块硬盘位,最大支持36块硬盘