DOITAPP
DOIT数据智能产业媒体与服务平台
立即打开
DOITAPP
DOIT数据智能产业媒体与服务平台
立即打开

英特尔傲腾(Optane)竟成了华数降本增效的利器

有数据显示,2017年中国传媒产业总规模达1.89万亿元,与去年同期相比增长16.6%。随着互联网IPv6的普及、5G时代的来临,广电传媒行业面临更大压力,竞争也会更激烈。不过,内容付费、粉丝经济等兴起于互联网的事务也正在成为广电行业新的增长点,广电传媒行业也在积极采用新兴的技术来弥补传统媒体业务萎缩的带来的负面效应。

说到底,对企业来说,技术创新是一种以投入换取业务创新带来额外收益的过程,如何能以比较低的成本完成这样的投入就显得非常重要,华数作为广电行业的一支生力军,在创新之旅结识了英特尔傲腾,实践中傲腾竟成了华数降本增效的利器。

华数

创新求变的华数

在互联网强势的冲击下,华数也在思考自己作为管道运营商角色的价值。于是,在“互联网+”上升到国家战略背景下,2016年,华数提出了新网络+应用、新媒体+内容、大数据+开发三大战略,以“产业+资本”双轮驱动,正在构建以新网络、新媒体、云计算、大数据、原创内容以及智慧化等产业板块为重点发展方向的公司。

华数传媒网络有限公司(简称华数)是一家大型国有文化传媒产业集团的控股子公司,位居中国新媒体产业发展第一方阵。如今的华数正走在技术创新的道路上,在IT基础设施方面也有很大投入,是广电行业中第一家落地SDN项目的公司,同时在OpenStack,Container,k8s等新技术上均有很多实践,并在全新的英特尔Optane(傲腾)上进行大胆尝试,认真评估,最终在成本、性能等方面取得了不错的收益。

华数传媒平台运维总监张琴介绍说,华数拥有齐全的广电行业牌照,业务包括传统有线电视,手机电视以及互联网电视三屏业务,另外还有宽带网络业务,覆盖海量传统媒体和新媒体用户,其中互联网电视用户有1亿、手机端产品用户有5600万、数字电视用户有3000万。另外,华数有自己的内容库,许多朋友熟悉的天猫盒子,其实就是华数的内容和技术服务输出。

华数一直坚持以技术创新来驱动产品创新、服务创新。张琴介绍说,华数非常支持技术创新,比如华数的技术部门每年都有一些专项的预研的项目,去做一些新技术的预研,评估,如果可行就会很快付诸实践。公司高层所秉承的技术创新才能驱动产品创新和服务创新的理念从2001年成立以来一直没变过。

广电行业的大数据应用场景与瓶颈

华数的平台上有庞大的用户群体,有海量的数据,这为大数据战略的发展奠定了坚实基础,而张琴所在的团队负责技术设施建设和数据挖掘,数据在越来越多的多场景中展现出了价值,广电行业的大数据有哪些应用场景?又有哪些产品方案呢?

首先能想的到的智能推荐系统。张琴的团队对华数传媒平台的数据做了收集、整理、挖掘分析,分析用户的喜好,向各种平台用户提供智能的内容推荐服务,提高用户对内容的点播率。另外,根据用户在电视购物时的缴费喜好作分析,也能促进电视购物业务发展。

收视数据的实时分析。华数的收视罗盘能实时看到点播数据,看到用户的点播喜好,还能检测到平台上比如浙江卫视一些节目的收视率,每当有关注度较高的体育赛事时,点播的情况在收视罗盘都看的一清二楚。

久而久之,结合重大赛事等关注度高的节目,对收视情况做出一些预测的准确性会越来越高,系统维护保障部门也会做一些有针对性的维护操作,防止出现因资源准备不足造成的直播故障。

华数传媒平台上的数据非常多,除了几十PB的媒体资源外,还要存储PB级的脱敏冷数据,将其存放在对象存储平台上,还有许多热数据用了SATA SSD,大容量数据用的是传统磁盘,华数传媒平台上的数据架构还是很复杂的。

随着业务规模的扩张,数据技术承载了越来越重要的任务,数据处理的规模也越来越大,张琴的团队不得不寻找有竞争力的数据挖掘解决方案。

华数传媒平台运维部基础平台部经理胡川表示,在做大数据处理时内存成了最大瓶颈,一些应用比如数据库操作对内存I/O或者磁盘的I/O要求是很高,目前只有傲腾 (Optane)才能满足我们的需求。

傲腾带来了什么?

2017年,华数从实际测试中开始了解傲腾技术,伴随着英特尔CPU的Tick-tock节奏,新一代CPU正式供货后,华数的傲腾也开始落地应用,一次广电行业的前沿实践也开始了。

2018年8月开始,几十片傲腾陆续部署在了位于杭州市滨江区白马湖华数数字产业园的12台服务器上,为400台云主机提供总计10TB的内存。

服务器的内存由原来的DRAM加上Optane(傲腾) SSD构成,在英特尔内存驱动技术(Intel Memory Drive Technology)的帮助下,Optane SSD与DRAM打通成为内存子系统,从操作系统的角度看起来,跟以往的DRAM没什么区别,而且,这一方案突破了原有的系统所能承载内存的上限,在华数的服务器中,一台主机上最高能配上704G内存,而以前使用DRAM内存最多能装配512GB内存,可用内存容量提升了37.5%。

华数传媒平台运维部基础平台部经理胡川补充说,英特尔默认的方案中DRAM和Optane的容量比为1:8,而在实测中他发现,性能非常好,于是试着将配比改成Optane容量最高的模式,结果性能表现还是超出了预期,于是就干脆就把内存配比调成了容量最大的模式。

Before vs. After

如上图可见,Skylake架构的Gold 6148(20核)比Boradwell架构的E5 V4(14核)的核心多了6个,增加了43%,新的CPU性能必然会有所提升,能提升多少呢?

谈到这次改造,华数传媒平台运维部基础平台部经理胡川激动地表示,用了傲腾的方案后,明年就不需要大规模的扩张了!经过实际测试发现,原来,傲腾(Optane)配合英特尔新一代Skylake CPU,整机性能提升了97%,单台设备的服务能力几乎翻了一倍,一台服务器相当于过去的两台服务器,更大内存,更高性能意味着能支持更多的虚拟机资源,原定的扩充计划也就不需要了。

非常不可思议的是性能表现。胡川还表示,在新方案下,原以为云主机的性能会有所下降,结果内存性能反而更高了。实际应用中,内存性能提升了百分之十几,可能在用户端就表现为,点播一个视频的等待时间能降低10%。在phoronix-test-suite benchmark ramspeed测试中,平均性能表现为20872.63MB/s,而之前仅为13298.05MB/s。

最后,我们来看成本问题。新服务器在增加可用内存、提升性能的同时,还降低了成本,算下来,新服务器整体价格仅比旧服务器高10%左右,算下来因为性能提升和内存的扩增减少的硬件投入成本,整体方案成本降低了大约44%,算下来能节省几十万、上百万的资金投入。

在华数采用傲腾方案的过程前后,得到了来自英特尔的技术支持,与许多有强大开发团队的互联网公司不同,华数使用傲腾过程中对应用本身没有做什么改动,对华数来说,成本并不高,对华数的技术团队来说,压力也不大。

傲腾,广电行业降本增效的利器

在许多人看来,傲腾作为英特尔主打的存储创新方案,感觉成本会比较高,而从华数的实践来看,傲腾竟成了华数降本增效的利器。

胡川表示,最早用傲腾第一个出发点就是成本,在经历了内存价格不可思议的疯涨后,它找到了内存的替代方案,在使用的过程中渐渐了解了傲腾的更多特性。

在与英特尔技术团队的沟通中,也看到了更多创新的存储方案,比如高密度的Ruler大容量存储,比如持久内存技术等等,在数据中心基础设施的创新方面华数保持着非常开放的态度,而张琴的团队通过不断探索,最终让系统在提高效率的同时降低运行成本,进而提升竞争力。

在张琴看来,傲腾带来的降本增效的能力,对于华数三大战略的实施有重大意义。对于略显保守的广电行业来说,华数的创新实践值得借鉴和参考。

参考资料:

http://www.sohu.com/a/242283656_505744

5分钟看广电行业现状:2018传媒产业发展报告要点。

未经允许不得转载:DOIT » 英特尔傲腾(Optane)竟成了华数降本增效的利器