2020SACC专场十八： 音视频架构与算法（PPT下载）

一场优质的企业直播活动，少则几十万用户，多则上百万用户，需要做到系统稳定，接口不出错，播放流畅不卡顿，这就需要一个非常稳定的平台，专业的技术团队做现场保障，以及完善的保障流程。
直播的特性决定大量的用户会在很集中的时间内进入到直播间，极短的时间内，会对系统造成很大的压力；另外，当主播在发直播红包或者做直播间商品变价的时候，所有的客户端都会重新请求服务端获取信息，这些都决定了直播的系统设计，需要一直考虑如何在不损失用户体验的前提下削峰，针对此类场景我们设计了一整套相应的应对措施与大家分享。同时直播中，直播流是非常重要的，如何保障用户播放流畅不卡顿，还要应对用户不同的网络环境，不同的手机机型，对此我们不仅需要保障推流端的稳定、高可用，同时还要保障用户侧的流畅观看，这就依赖于推流保障，客户端帧率智能降级及实时的播放监控系统。
直播中还有一个特别重要的环节，那就是直播互动。不管是在评论区发言和主播互动, 还是主播喊3..2..1上链接，用户端都需要及时的展示信息, 这就对我们的消息服务有很高的要求，我们对所有的消息进行了分级，做不同的策略处理，同时保证重要消息百分百的到达。一场重大的直播活动，是一次消费者的狂欢，对于背后的技术支持人员来说，是一次又一次的大促考验，我很高兴能够参与其中，也很高兴直播带给我和我的团队的挑战和成长。

曾负责PP体育API网关设计，HTTPDNS设计，缩少20%APP接口调用时长；
曾负责PP视频整体应用架构，所见即所得CMS设计，屏蔽APP版本间差异，可做到无版本差异化运营；
现负责苏宁直播整体技术工作，经历过多场618、818、双十一直播晚会的保障和运维工作，设计通道融合方案，使用SEI和长连接结合的方式，保证直播玩法消息的到达，保证主播口播和操作的一致性。

大规模娱乐直播、电商直播、教育直播等业务场景经过十年左右的发展，现如今已经深入人心。近几年来，各种技术不断涌现出来，试图提升抗弱网能力，降低延迟，降低卡顿，特别是新冠疫情极大地提升了大家对在线会议、在线教育的普及程度。在过去，音视频会议等实时音视频能力意味着巨大的成本和技术投入，包括带宽、机器资源的采购和大量的运维、研发投入。阿里云基于多年来实时流媒体领域的研发经验，设计架构了大规模、分布式的实时传输网络，利用阿里云CDN覆盖全球的将近3000个节点提供低延迟的接近接入，结合智能组网能力，落地了覆盖全球的实时传输网络，提供基于标准webrtc 的通信级音视频传输、分发能力。这将极大地降低各个厂商开发实时音视频业务的网络建设成本，帮助客户将精力聚焦于业务打磨。

2015年加入阿里云，多年专注于实时流媒体领域的研发，参与阿里云直播系统的设计和开发。设计架构了阿里云GRTN的接入方案和组网方案并带领团队进行研发落地。

随着通信业的迅猛发展，5G的迅速铺开，基于5G的应用层出不穷。随着网络带宽的增加和网络延时的降低，持续高热度的的沉浸式视频（Immersive Media）再次遇到新的机遇。本演讲会从360度摄像头采集开始，系统的介绍英特尔IM360项目，一个完整的360度视频直播的采集，拼接，转码，传输，和分发的方方面面。演讲者还会介绍一个IM360系统的性能和延时的优化策略 -- 基于云端的360视频拼接方案：如何利用Intel开源软件，AVX512指令集，WebRTC方法在Intel的Xeon CLX上达到低延时实时。

沈钢在英特尔（美）主要从事网络视频传输，5G边缘计算，智能应用系统的设计和研发工作，拥有多项视频网路相关专利并参与多项对MPEG-I，3GPP标准的提议工作。领导和设计了多项大规模多媒体传输系统，其中近期的IM360项目是针对5G边缘计算架构的端到端的低延时360视频传输系统。在加入英特尔之前，曾在诺基亚曾经主持过手机移动电视（欧洲DVBH，中国移动CMMB）的产品研发。
宗炜长期从事计算机视觉算法与应用、数字图像处理、Camera成像算法的开发工作。在CPU/GPU/ISP异构计算算法设计与优化等方面经验颇丰。是图像处理与计算机视觉算法开源项目libXCam的维护者和主要贡献者。近期参加了英特尔IM360项目的开发与部署工作，为该项目开发集成了实时视频拼接算法，并进行了系统调优工作。宗炜近期参与撰写了《OpenCV深度学习应用与性能优化实践》一书的部分章节，此书已由机械工业出版社出版发行。与同事共同撰写并获批了两篇360 全景视频相关专利。

分享 ZEGO 实时音视频服务的系统架构实践经验，完整介绍 ZEGO 实时音视频服务系统架构及相应的可用性保障手段；ZEGO设计哪些方案解决全球用户接入质量问题，应对大规模高并发场景，从而充分保障和提升用户体验质量。

即构科技后台架构负责人，技术专家，在大规模高并发分布式系统架构设计和实践方面有着十余年的丰富经验，目前专注于实时语音视频云服务的调度系统和分发网络，主导映客、花椒、微博一直播、好未来、作业帮、中国工商银行等行业头部客户的流媒体服务工作。

中国视频产业的高清化还没有完全落地，又新推出超高清化，那必然在落地过程中存在诸多问题。如果优酷单从视频播放平台的角度来解决问题是远远不够的，需要从整个产业链条的角度全面地考虑整体解决方案，才能够促进中国视频产业超高清化。优酷推出的帧享就是从全产业链出发，包括视频内容制作、生产、传输、终端设备等关键环节进行实践、优化，解决了全产业链中的内容制作成本问题、质量问题、网络带宽问题、端后处理等诸多痛点，为互联网用户提供的超高清视听体验。

负责阿里大文娱集团多媒体资源的生产业务系统的架构及技术管理，负责帧享标准制定、内容的生产和业务合作。