首页/QCon:AI时代下的融合通信技术/

QCon:AI时代下的融合通信技术

上海2021-10-21
收藏

image

专题: AI时代下的融合通信技术


近年来,通信技术日渐呈现融合发展趋势,即时通讯、实时音视频、直播等通信技术与人工智能和 5G 紧密结合,在新冠疫情的催动下已应用在各行各业的线上化业务中;与此同时,广泛的应用对网络性能和网络质量也提出了更高的要求。本专题将为大家介绍融合通信技术的前沿探索和落地实践。


![image](https://yx-web-nosdn.netease.im/quickhtml%2Fassets%2Fyunxin%2Fdefault%2Fqcon%2F0.png)

专题出品人:陈功 网易智企 技术 VP



目前就职于网易智企,毕业于中国科学技术大学,获得模式识别和智能系统专业博士学位。超过 15 年的音视频相关领域经验。《WebRTC权威指南》中文版第一译者,引领 WebRTC 技术在国内的发展,主导开发的 RTC 服务是国内第一个日用量超过 1000w 分钟的 WebRTC 产品。原 Intel 服务器事业部多媒体架构师,主导 Intel Collaboration Suite for WebRTC(OWT前身)架构设计和研发。曾任职 Marvell 视频事业部,研究多媒体系统框架,参与设计和研发第一代 Google TV/Chromecast 产品。

演讲1:融合通信的趋势和技术演进方向



融合通信涵盖了 IM、RTC、白板、直播、点播等各种通信能力,多种通信技术的融合带来了业务层面的革新。一方面,娱乐社交、在线教育、金融等各行各业层出不穷的新玩法,以及各大云服务商提供的一站式解决方案,都依赖底层多种能力的整合;另一方面,在技术融合的趋势下,对各项技术能力的演进也提出了更高的要求,既包括底层能力的打通,也包括上层服务层的无缝衔接。本次分享将介绍网易云信在融合通信方面的技术探索和落地实践。 ![image](https://yx-web-nosdn.netease.im/quickhtml%2Fassets%2Fyunxin%2Fdefault%2Fqcon%2F2.png)

分享嘉宾:曹佳俊 网易云信资深服务器开发工程师



毕业于中国科学院,硕士毕业后加入网易,负责云信 IM/RTC 信令等业务的服务器开发。专注于即时通信、RTC 信令以及相关中间件等技术,是云信开源项目 Camellia 的作者。

演讲2:视频通信关键技术探索及实践



优秀的视频引擎是好的视频体验的基石,网易云信的业务覆盖了主要的视频场景,包括了甚低延时的实时音视频场景,允许部分延时的直播场景和不强调延时的点播场景,网易云信视频团队做了大量努力来保证每种场景下用户极致的视频体验,本次分享将介绍网易云信视频在各个场景下的关键技术和应用尝试。 ![image](https://yx-web-nosdn.netease.im/quickhtml%2Fassets%2Fyunxin%2Fdefault%2Fqcon%2F1.png)

分享嘉宾:韩庆瑞 网易音视频实验室高级技术专家



网易音视频实验室高级技术专家,网易云信视频团队负责人。拥有 15+ 年视频图像和网络传输开发经验。毕业于武汉大学,获得硕士学位,拥有 20 多项专利,发表论文 3 篇。之前就职于腾讯和华为,在华为期间领导了绝大多数华为商用视频编码器的开发和落地,包括带领团队开发了华为视频会议的 HEVC 编码器算法——全球第 1 个 FPGA 实现的 HEVC 视频会议系统;领导了海思麒麟芯片的 HEVC IPCore 算法设计;设计并带领团队开发了面向流媒体业务的 HEVC 编码器——HW265;领导开发的多款 H264 编码器广泛用于华为视频会议和服务器产品。除编码器外,他也有多年计算机视觉经验,带领团队开发了业界首款手机 3D 建模系统,落地华为荣耀 V9;在腾讯期间开发了多个用于腾讯会议的网络传输算法。



演讲3:音频 AI 算法在 RTC 中的实践



随着人工智能技术、计算机技术、神经网络等领域的不断发展,AI 音频算法也在学术界和其他行业不断涌现,“怎样将 AI 音频算法应用到 RTC 领域中”是作为 RTC 从业者的一个值得探索的课题。本次分享会聚焦“RTC 应用 AI 音频算法的难点”、“AI 音频算法落地的解决方案”、“网易云信 AI 音频算法落地案例”三个维度,和大家分享 AI 音频算法和 RTC 的实战经验。 ![image](https://yx-web-nosdn.netease.im/quickhtml%2Fassets%2Fyunxin%2Fdefault%2Fqcon%2F3.png)

分享嘉宾:郝一亚 网易云信音频算法专家



博士,网易云信音频算法专家,IEEE审稿人。发表学术期刊/论文 15 篇,申请专利 7 项。曾参与美国卫生局 NIH 助听器音频算法项目、Apple AirPods 音频算法研发 、Facebook Reality Labs AR/VR 音频项目、以及 Zoom Video Communications 实时音频算法研发工作。目前在网易云信主要负责音频实验室搭建、3A 算法研发、AI 音频算法研发以及 RTC 音频标准制定。

演讲4:网易云音乐网络库跨平台化实践



网络库作为 APP 的核心,很大程度上决定着用户的“体感”和“快感”,在优化过程中,你是否和我们一样,有着类似的困扰:
1. 系统网络库由于暴露的能力或接口有限,你无法进行深层次的定制或改造,很多“优化”浮于表面,并不能带来实质的性能提升
2. 各端系统网络库差异大,你不得不将“相同的”网络优化策略&监控在各端上进行适配,你感觉工作量在成倍增长,即使这样,多端“一致性”你还是无法保证
3. 同样由于网络库的差异性,各端能采集的数据指标不能完全对齐,你不得不在后台监控服务中写下“可恶”的兼容性代码
4. 随着移动端的崛起,PC 端在“小众化”,但这并不代表 PC 端用户不需要对应的优化及监控,可是你确实没有精力兼顾
5. 大厂可以不惜代价,筹建庞大的团队深入协议栈进行重新开发优化,但是你只想投入有限的资源,并希望换来可观的网络性能提升

你该怎么办?在这次演讲中,我将以云音乐网络库跨平台化改造为例,与大家一起探讨交流。 image

分享嘉宾:陈松茂 网易云音乐资深音视频开发工程师



2020 年底加入网易云音乐,一站式网络解决方案技术负责人,目前从事跨平台网络解决方案相关研究,旨在降低多端网络优化的研发成本,用较低的成本获得持续可观的网络性能提升。曾就职于阿里,长期从事于 Chromium 相关技术研究和应用,拥有丰富的浏览器开发和内核升级经验。



更多信息请见QCon官网:https://qcon.infoq.cn/2021/shanghai/track/1228

© 1997-2024 网易公司增值电信业务许可证B1-20180288浙B1.B2-20090185粤B2-20090191-18工业和信息化部备案管理系统网站隐私政策