阿里云助力传媒行业创新
2018-09-12张广亮阿里云传媒行业高级解决方案构架师
张广亮 阿里云传媒行业高级解决方案构架师
非常有幸代表阿里云传媒团队来分享我们在传媒行业的技术和解决方案。云计算现在已经成为一种新的基础设施,为创新提供了一个绝佳的舞台,阿里云可提供快速开箱即用的最新互联网技术;提供按需使用计费模式,实现更低的试验和创新成本;提供弹性架构,轻松应对业务爆炸性增长;提供可靠的安全防护体系、完善的合规认证规避风险;提供行业领先的解决方案;提供标准化和自动化,方便运维;提供全球化的部署,实现更快的全球业务扩展。
阿里云在国内市场的份额占据了半壁江山,中国市场份额超后10位追随者的总和,中国 37% 的网站建立在阿里云之上;阿里云是全球强有力的竞争者,根据Gartner发布的2017年全球IAAS报告,亚马逊AWS、微软Azure、阿里云分列全球前三。
阿里云注重国际化的发展,把国际化作为我们重要的战略之一。在全球19个地理区域内运营着43个可用区,未来还有更多;阿里云CDN覆盖全球 六大洲,70多个国家,1300+ 全球节点(国内1000+、海外200+节点),全网带宽输出能力为85Tbps。
在国际化方面,我们发布了Armstrong计划4.1,也就是产品全球同步发布计划。国际化取得的成果包括:建立标准化、国际化的API/SDK新规范;软件全球化, G11N体系帮助建设国际化的云产品;文档和翻译流程标准化;控制台 One Console,支持多种语言;全球同步发布,全球公测。
阿里云不仅仅是虚拟化平台,还是一个云计算的基础设施。我们已经发布了319 个产品和功能,包括云计算基础服务产品、大数据产品、安全产品、域名与网站产品、通用/行业解决方案。
图1是阿里云产品和体系架构。最底层是阿里云全球的基础设施,覆盖全球19个地理区域 、43个可用区、1300+CDN节点。向上是基础服务层,提供弹性计算服务、数据库服务和存储服务,再向上是扩展服务层,提供大规模计算、应用/中间件、安全/监控。在基础服务层和扩展服务层,我们提供了众多的阿里云产品。阿里云可以提供行业解决方案,给各行各业赋能。
阿里云计算给各行各业赋能。在赋能智慧城市方面,可以优化交通、肇事车辆追踪,智能监控,信号灯调度,为救护车放行,挽救生命;在赋能农业方面,可以筛选育种、基建数据化、农事管理、基地选址及农作物生产预测;在赋能工业方面,可以风电机组的故障预测,光伏切片良品率提升,企业生产的产废次废分析,纺织业配棉方案优化等等。工业大数据化是大势所趋,阿里云助力“中国制造2025”计划,强调制造业数字化、网络化、智能化,在“工业4.0”实现“弯道超车”; 助力医疗,在浩如烟海的DNA序列中,比对识别出发生突变的基因位点;继承成百上千位影像学专家的“眼力”,在CT、核磁、B超或X光暗黑的器官/组织剖面成像上,捕捉毫米级的小病灶,时间可缩短至1分钟内。
下面介绍在媒体领域,我们能够提供什么样的技术。过去我们在做传统应用时,是在做烟囱式搭建,一个系统就是一个数据孤岛,无法横向扩展,扩展升级不方便。现在的互联网应用体现为分布式,无状态,去中心化,线性扩展,网络架构多采用“DNS+负载均衡层+CDN”,尽可能拆分/微服务化,通过API互联整合,方便独立升级,弹性伸缩,异步化,更多地利用成熟服务组合上层应用,数据化运营。在互联网领域有很多可用的技术。
在阿里云上我们有一整套完整的解决方案。图2是阿里云互联网化的应用架构。在移动端设备或是桌面端设备用户访问时,首先经过SLB负载均衡,负载均衡后,是ESS弹性伸缩服务。阿里云弹性伸缩服务在业务需求高峰增长时,可以无缝增加ECS实例,在业务需求下降时自动减少ECS实例。根据用户的业务量变换,弹性伸缩 ECS 实例,能够帮助用户实现应用级别的弹性伸缩,而且极大节约了成本。再往下是EDAS应用层、EDAS共享服务层。通过阿里云的中间件产品,将应用拆分成微服务化的模式,每一个微服务化都可以根据应用负载的情况进行动态扩展,实现应用层的高可用。
图1 阿里云产品和体系架构
图2 阿里云互联网化的应用架构
再往下,是RDS业务数据库、云数据库Redis版、DRDS分布式数据库、OTS 表格存储、OSS对象存储,通过这些技术来保证数据层的高可用。
通过阿里云的日志服务,将用户日志、设备运行日志、服务器运行日志收集到大数据平台,经过大数据分析,可以做数据运营,例如可视化的智能推荐。在安全方面,我们运用了阿里云的很多安全产品,去保证整个体系的高安全。
目前,很多机构都采用阿里云商的架构做各种场景应用,例如服务于春晚、服务于世界杯这样大流量并发的应用场景。
现在,混合云在传媒行业应用得非常多,例如江苏广电的荔枝云,浙江广电的萧山云,还有很多电视台也已经做成了混合云的模式。混合云是传统媒体解决融合媒体转型,向互联网应用延伸的一个非常有用的解决方案,混合云既能保证媒体在线下已有的设备投资,又能保证在线上面临突发海量用户访问流量时,可以通过公共云做技术支撑。
阿里云的混合云解决方案,是弹性伸缩,让你的应用更接近互联网用户。在阿里云这一侧,更多部署互联网的应用,带给企业互联网新技术,带给企业近乎“无限”的资源,带给企业更强的安全防护能力,带给企业更灵活的业务弹性,带给企业更高的数据可靠性与应用可用性。
在资源方面,在春晚期间,还有2018世界杯期间,中央电视台的央视网都是通过阿里云的弹性的能力,实现了对海量流量高峰的技术支撑。
云上灾备解决方案。广电非常关注容灾备份,因为安全是广电的重中之重。我们的互联网应用支持多种云上灾备解决方案。可以通过混合云模式,在云上搭建正式的环境,在线下搭建容灾的环境。在各个环境之间,我们有很多技术来保证数据的一致性,包括在容灾切换过程中的一些技术的难点。例如我们的云解析、语音解析,支持分布式的DNS授权,在正常情况下,可以把它负载到某一个环境里,一旦发生容灾应急,我们可以快速切换到容灾备份中。在数据库层面,数据一致性是容灾的重要保证,我们有数据传输服务DTS技术,这也是运用在天猫、淘宝的双11购物节中的一个技术。在存储方面,我们有跨区域复制技术,保证数据在多个区域之间的一致性。通过这样一些技术,就能够在云上和云下,或者在两个云上的两个地域里都能实现云上的容灾备份。
图3 阿里云的混合云解决方案
图4 云上灾备解决方案
图5 安全解决方案
安全解决方案。阿里云的整套安全体系来自于阿里巴巴做天猫、淘宝、支付宝过程中所积累的一整套的安全解决方案。这套安全解决方案是和天猫、淘宝、支付宝联动的,也就是说,以前每一次攻击天猫、淘宝、支付宝的恶意脚本,攻防的特征,我们都会把它记录下来,沉淀下来,统一用于防护阿里云上面的客户。从图5可以看到,防护体系是分层的,终端层有移动安全防护,网络层有高防IP,在主机与应用层部署有安骑士云服务器、外部防火墙,在业务层的有数据风控、绿网防护等解决方案。在数据安全方面,有加密服务、https证书服务。最后还有大数据安全分析监控软件,通过动态态势感知技术,可做出可视化的安全预测,整体分析网络情况、数据库的访问情况,结合阿里云的安全大数据,整体判断服务器、数据库是否安全,有没有受到攻击,攻击来自于哪里。态势感知技术能够及时发现安全威胁。
直播解决方案。可以做到推流上行链路的稳定 +播放下行链路的流畅。
(1)直播流接入,处理,分发
通过集成阿里云直播SDK,用户可以轻松实现移动的,PC端的直播流推送。直播服务器接收到直播流,对流进行处理(转封装、转码等),并通过CDN进行分发。支持10万+路流输出、1000万+观众同时在线。
(2)直播云服务
阿里云视频直播服务在云端可以提供一站式的直播解决方案:包括实时转码,直播截图,直播录制,添加水印,时移观看等功能。并且提供直播IM,连麦等直播互动产品解决方案。
(3)播放
通过集成阿里云直播SDK,可以直接实现iOS,Android,Web端的直播视频播放。
对目前主流的视频格式提供了良好的支持,流媒体格式支持HLS、RTMP、HTTP FLV,文件媒体格式支持MP4。视频压缩格式支持h264,音频压缩格式支持aac。
点播解决方案。点播和直播的工作流程相似,都经过节目数据采集、节目数据上传云端,通过阿里云的强大视音频处理能力,再到分发端,最后在客户终端观看这样一个过程。
阿里云点播解决方案具有专业级视频编码能力。
(1)输入格式全覆盖
图6 直播解决方案
容器格式:3GP、AVI、FLV、MP4、M3U8、MPG、ASF、WMV、MKV、MOV、TS、WebM等,视频编码:H.264/AVC、H.263、 H.263+、MPEG-1、MPEG-2、MPEG-4、MJPEG、VP8、VP9、Quicktime、RealVideo、Windows Media Video 等,音频编码:AAC、AC-3、ADPCM、AMR、DSD、MP1、MP2、MP3、PCM、RealAudio、Windows Media Audio;
(2)编辑功能
具有截图、水印、媒体信息、视频转GIF、音视频抽取、裁剪、剪辑、拼接等
(3)可实现并行高速转码,窄带高清编码,可节省20%~40%带宽
(4)自动deinterlace,detelecine,支持输出interlace格式;
(5)支持强度自适应去噪、CBR、自动去黑边、贴黑边;
(6)画质重生:高帧率重制、标清转高清、受损片源修复。
传媒智能内容生产解决方案。视频内容是非结构化数据,以前计算机无法理解和直接应用视频里的信息,导致了我们只能用人海战术对视频进行编目、审核、拆条等处理。因为视频中携带的大量有价值的信息开采费用太高,无法得到有效利用。
基于深度学习的人工智能技术发展,使我们理解、获取音视频里的数据成为可能,借助飞天平台的大数据和强大计算能力,阿里云推出了传媒智能内容生产解决方案,帮助用户获得视频里的信息,并利用这些信息高效准确地进行打标、编目、审核和检索等处理。
阿里云传媒智能内容生产解决方案的特点:
(1)本地化部署。支持本地化部署及一体机,快速方便的实施 。
(2)多模态分析。提供视觉、语音、文本、云端多模态信息分析技术,全方位理解视频。
图7 点播解决方案
(3)标签体系完善。综合大量视频素材库、标签体系库,利用阿里大文娱体系海量媒资数据和用户行为数据,打造最全面的视频标签系统 。
(3)强用户体验。精准度,利用多项视频AI技术,对视频进行全方面理解 。
背靠阿里大数据,各种分类、推荐算法快速迭代。传媒智能内容生产的应用场景:
(1)自动标签
通过视觉、语音、文本、运动等多模态分析,完整理解视频内容,根据阿里云完善的标签体系对视频进行分类和打标。
利用人脸识别技术,为视频标注相关人物以及出现的时间点。可以帮助用户快速对视频进行编目和建立索引。
(2)新闻拆条
智能识别新闻节目信息,自动根据节目特征拆分一个完整新闻节目为若干个独立的新闻条目,为新闻推送生产素材,也可以为新闻后期进行精细加工提供原料。
通过采用各种智能技术,如内容智能分析、节目信息标引、语音识别、串联单和文稿分析、转场识别、字幕识别、人脸识别、画面识别、关键帧提取等智能处理技术来完成对需要处理的节目的切条分段。
(3)视频首图和视频摘要
通过对视频内容的理解以及结合画面美学,选择最优的关键帧或关键片段作为视频封面图。让内容入口更美观,增加用户点击率。
(4)视频精彩集锦
通过对视频内容的理解,把长视频里最精彩的片段抽取出来,形成一个短视频用于回放。例如在一场足球比赛中,智能地抽取出精彩射门场景,形成一个短视频,帮助编辑快速生成视频集锦。
(5)视频版权保护
通过给视频建立“指纹”库,可以对新增视频指纹和库里的视频指纹做比对,对存在版权风险的视频进行播放控制,降低侵权风险;对自有版权的视频资源,从公网抓取视频数据鉴别,防止自有版权内容被侵权。
(6)视频智能推荐
生成视频的定长特征,计算视频之间的相似度,结合用户行为数据,为用户推荐他最感兴趣的内容,提高视频点击转化率。
(7)电视导购
检测并识别电视画面里的特定类目的目标,例如某款手表、墨镜,根据对应广告商品库信息,自动触发对应商品广告,提高广告点击转化率。
(8)视频语音识别
实时识别视频里的文本内容,在会议直播时,为观众提供实时字幕。为视频生成对应语音文本,可用于后续审核和检索等环节。语音识别结果,可应用于辅助电子场记。
智能内容审核解决方案。基于阿里领先的人脸识别技术,对新闻媒体大量视频和图片资源进行全自动且精准的快速识别,识别出视频中的敏感人物,降低政治风险,提高工作效率,节省人力成本。
媒体大数据解决方案。媒体大数据解决方案致力于融合传统传媒产品、运营、市场的数据需求,实现支撑用户运营管理与服务的“数据+平台+应用”的三层体系,是推动传统媒体转型升级,赢得未来的必由之路。
(1)赋能业务
数据大屏:无处不在的数据大屏赋能:如,接待+活动监测+日常业务监测+技术监测+特别定制互动大屏等等;
数据分析:实现运营过程业务全局通用的数据分析,以及从关键指标到问题页面/区块/位置步步深挖的可视化数据分析;
图8 智能内容审核解决方案
图9 媒体大数据解决方案
用户画像:基于以“人”为核心的数据应用层标签数据输出,面向应用场景给目标人群画像并圈选后进行分析、运营等;
智能推荐:基于人群画像面向目标人群进行千人十面、百面的个性化推荐,最大化提高资源利用率的同时改善用户体验。
(2)统一数据
统一大数据采集:技术能力具备统一标准、布点、解析和结构化;内容范围包括统一日志数据采集+业务数据集成+外部数据采买等等;
统一大数据处理:技术上基于数据采集,统一数据标准、建模研发、连接萃取以形成标准规范可连接画像的数据体系;内容建设包括统一数据公共层,支持数据应用层百花齐放;
统一大数据资产管理:闭环管理包括资产概览+数据地图+资产治理+资产分析+资产运营,业务看如何开源、技术看如何节流的多视角;
具备统一大数据服务的能力:基于大数据建设形成的数据内容,具备提供数据开放服务的能力,从而实现数据共享服务。
(3)统一计算
统一离线计算:技术上基于数据离线批量处理,包括计算、存储和管理;业务感知具备数据延迟一天可见……
统一实时计算:技术上基于数据在线实时处理,包括采集、计算与对接展现;业务感知具备数据小时、分钟、秒级延迟可见……
统一在线分析:技术上基于数据在线查询分析;业务感知具备自由灵活的多维查询服务及极速的查询响应……
媒体大数据解决方案见图9。
最后介绍阿里云的传媒营销引擎解决方案。阿里云具有各种功能完善的产品,产品支持构建传媒营销引擎解决方案,包括全流量跨屏管理方案、原生广告形式;产品适用于新生业务场景和商业模式,自售+程序化交易模式;可PaaS化输出API能力,可二次开发;可搭建自有DMP,实现精准定向。
系统高效稳定,具备先进的网络传输和渲染技术,速度快,损耗低;分布式计算提供实时、高效的定向能力;高并发处理能力,双机房部署(公共云)。我们还提供很多服务类型的产品,可以提供流量变现运营策略咨询服务和广告售卖方案咨询服务。通过这些方式和阿里的技术能力,运营能力,在广告售卖能力上,帮助传媒客户在新互联网环境下创新盈利的模式。
图10 传媒营销引擎解决方案
阿里云一直致力于做传媒行业技术和能力的支撑。希望各位媒体的同仁能够跟阿里云一起去展开我们的想象力,共同去推进媒体行业的业务创新。