| 首页  |  资讯  |  评测  |  活动  |  学院  |  专题  |  杂志  |  产服  |  
您现在的位置:硅谷网> 活动> 活动动态>

融云2021 X-Meetup续航上海 以场景应用解析音视频技术新方向

2021-05-20 15:38 作者:佚名 来源:硅谷网综合 关注: 编辑:GuiGu 【搜索试试

2021年5月15日,融云X-Meetup技术沙龙第三站续航上海。本场沙龙聚焦“音视频技术新方向”,由融云音视频研发高级工程师姜春雨、时光机器人创始人兼CEO徐晶、融云IM研发中心高级工程师刘佳、学而思网校架构师李亚龙,和资深音视频技术专家栗伟,五位技术大咖出任演讲嘉宾,他们以时下热门应用场景为视角,从技术实践出发,与开发者们交流分享了关于音视频技术的新观察。

iOS 上的音频开发

今年,由于Clubhouse和Tiya的示范效应,语聊房产品大火,音频的开发技术备受开发者的关注。来自融云的音视频研发高级工程师姜春雨,多年专注于移动端和音视频领域的技术研发,他分享了《iOS 音频设备开发 - Core Audio》的主题内容。

融云音视频研发高级工程师姜春雨发表演讲

姜春雨认为:移动端音频处理的难点在于声音美化、变声、实时高音质和场景玩法多样化。单从iOS设备来说,要突破这些难点,离不开iOS所提供的Audio Unit,它是一项强大灵活的音频处理技术,支持混合、均衡、格式转换和实时输入/输出,用于录制、播放、离线渲染和实时对话。

融云SDK以Audio Unit为基础,构建了长音效、短音效等多个功能模块,最终在音频设备上完成混音输出。在场景化实践中,姜春雨以音乐语聊房和百人超大会议室两个典型场景为例,分享了融云SDK的技术开发优化方案。比如,音乐语聊房注重高音质、美声变声,以舒适噪音为好,开发者要根据这些需求进行算法调优;而超大会议室的优化则要求做到服务端智能发流、多人声音同时出现可以智能选择会议发言人的声音。

姜春雨总结道:Audio Unit是一个强大的音频处理框架,音频处理要基于Audio Unit框架构建内容,并且要在音频处理内容上不断打磨优化。未来,融云音视频SDK还将不断基于不同场景需要开发新的功能,持续优化音频产品,为开发者提供更好的解决方案。

构建低延迟高可靠的信令系统

融云作为互联网通信云赛道的领先厂商,2020年在业界率先提出“IM+RTC+PUSH”的整体通信解决方案。融云RTC唤起用户的通道就是依赖于IM的SDK信令,因此,本次融云的IM研发中心高级工程师刘佳,分享了《构建低延迟高可靠信令系统的探索与实践》,帮助开发者更好地了解融云IM如何协同RTC,提供高可靠的通信能力。

融云IM研发中心高级工程师刘佳

刘佳介绍,高可靠音视频信令系统的构建在IM信令系统设计时,首先要进行服务分层,包括接入层、内部服务和数据存储的分层。而拆分原则要根据业务差异和服务对象的不同,拆分为API和 CMP,整体做到可监控、可维护。其次,是要搭建完整的监控体系,通过可视化的图表,监看网络的性能情况,及时处理系统瓶颈。

对于低延迟信令系统的实现,刘佳分享道,融云不仅利用全球加速网络,降低网络延迟,还基于融云自有通讯协议降低数据传输量,利用缓存机制,提高了服务的业务处理速度。并且,刘佳以缓存设计为例,说明通过一致性hash提高缓存命中率、高效利用CPU的处理能力、实施异步存储等,也都是实现低延迟系统设计的要旨。

基于这些设计要点,刘佳展示了海量并发用户场景下的语聊房系统架构,为开发者提供了干货解决方案。同时,他还总结出融云现有的音视频整体服务架构的三大优势:第一,信令服务与媒体服务解藕,两个服务之间也不需要状态同步;第二,媒体服务专注通信,信令服务专注能力;第三,部署简单,方便进行全球部署媒体服务。

直播系统架构设计满足用户对实时性的需求

本场沙龙中,音视频直播场景也是一个重点话题。深耕互联网音视频12年,在直播领域积累了丰富实战经验的拾光机器人公司创始人兼 CEO徐晶,通过他的《互联网直播快速实战》,分享了基于直播答题场景的架构设计,尤其是几个关键技术点和应对策略,以及如何保证直播中的视频和音频质量,都做出了详细的讲解。

沙龙中,专注于在线教育的学而思网校架构师李亚龙,还针对教育低延时大班的直播场景,为开发者带来了关于《在线教育直播系统架构升级》的分享。他着重从网校视频技术的发展、网校大班直播系统、网校公益直播课、低延迟直播探索这四个方面的设计要点,进行了分析讲解。对于专注在线教育的开发者而言,具有普遍的示范意义。

此外,资深音视频技术专家的栗伟,发表了《使用WebRTC构建实时在线课堂》的演讲。栗伟曾任职于中科院计算所、CC视频,任职期间利用WebRTC技术开发了直播、在线课堂、视频会议等商业产品,并发用户数达到500万。他还曾主笔撰写了 《WebRTC技术详解:从0到1构建多人视频会议系统》,在该领域有多年实践经验,对WebRTC有非常深入的研究,他的实践分享也让开发者们获益匪浅。

结语

在本次沙龙中,五位讲师的分享,其共性特点在于:他们都基于当下所关注热门场景展开话题。由此可见,应用场景才是“探讨音视频技术新方向”的基础,而越热门的场景往往越是代表着这个领域的发展潜力更大,因此也就越需要通过新技术、新产品加以承载。

随着5G的进一步落地,网络带宽、网络质量的不断优化,音视频通信无论在使用量级上,还是使用场景上,都会出现更多可能。对于开发者而言,只有及早储备,尽可能多地掌握新技术,关注新方向,才能赢在当下,赢在未来。

【对“融云2021 X-Meetup续航上海 以场景应用解析音视频技术新方向”发布评论】

版权及免责声明:
① 本网站部分投稿来源于“网友”,涉及投资、理财、消费等内容,请亲们反复甄别,切勿轻信。本网站部分由赞助商提供的内容属于【广告】性质,仅供阅读,不构成具体实施建议,请谨慎对待。据此操作,风险自担。
② 内容来源注明“硅谷网”及其相关称谓的文字、图片和音视频,版权均属本网站所有,任何媒体、网站或个人需经本网站许可方可复制或转载,并在使用时必须注明来源【硅谷网】或对应来源,违者本网站将依法追究责任。
③ 注明来源为各大报纸、杂志、网站及其他媒体的文章,文章原作者享有著作权,本网站转载其他媒体稿件是为传播更多的信息,并不代表赞同其观点和对其真实性负责,本网站不承担此类稿件侵权行为的连带责任。
④ 本网站不对非自身发布内容的真实性、合法性、准确性作担保。若硅谷网因为自身和转载内容,涉及到侵权、违法等问题,请有关单位或个人速与本网站取得联系(联系电话:01057255600),我们将第一时间核实处理。
广告
相关
·融云X-Meetup第二站落地南京 成开发者汇聚交流乐
·2016,中国金融云计算及大数据分析解决之道
·2014中国金融云平台峰会召开 普元强调数据治理
头条
爱生活探未来 UDE国际消费电子博览会新闻发布会召开 爱生活探未来 UDE国际消费电子博览会新闻发布
硅谷网讯2021年5月12日讯(郑超) ,5月12日下午,UDE国际消费电子及未来生活博览会(……
·爱生活探未来 UDE国际消费电子博览会新闻发布
·2021国际质造节暨全球消费领导力峰会6月北京
·中国财经峰会十年特别活动将于2021年7月上海
·ChinaBang年度榜单提名倒计时,7大热门赛道最
·第十四届中国IDC产业年度大典举办 新基建新产
图文
融云2021 X-Meetup续航上海 以场景应用解析音视频技术新方向
融云2021 X-Meetup续航上海 以场景应用解析
Dynatrace软件智能平台亮相2021年中国数字化创新博览会
Dynatrace软件智能平台亮相2021年中国数字
2019年淘宝造物节时间地点:2019年淘宝造物节看点
2019年淘宝造物节时间地点:2019年淘宝造物
WRCF2019世界机器人大赛总决赛在河北保定开赛
WRCF2019世界机器人大赛总决赛在河北保定开
热点
·2019年淘宝造物节时间地点:2019年淘宝造物节
·MCS 2019中国医疗器械CIO峰会 8月在上海启幕
·ACS 2019第三届中国汽车CIO峰会近日正式启动
·2018今日头条生机大会落幕 生态升级创作者迎
·PCS 2019第二届中国医药CIO峰会启动 6大亮点
旧闻
·华东电路板展5/16登场 建构绿色PCB安全生产周
·GMIC北京2018点燃AI新时代:AI生万物 未来已
·升级企业能力 CRM和DMS展会2014年4月上海召开
·首届数字中国建设峰会落幕 梅泰诺再铸辉煌
·广阔天地,大有所为 暨益体康2016全国科普展
广告
硅谷精选
融云2021 X-Meetup续航上海 以场景应用解析音视频技术新方向
融云2021 X-Meetup续航上海 以场景应用解析音视频技术
Dynatrace软件智能平台亮相2021年中国数字化创新博览会
Dynatrace软件智能平台亮相2021年中国数字化创新博览
信也科技架构师出席ArchSummit峰会 分享架构思维新模式
信也科技架构师出席ArchSummit峰会 分享架构思维新模
超过1300支队伍参赛 第二届阿里云运维算法大赛圆满落幕
超过1300支队伍参赛 第二届阿里云运维算法大赛圆满落
与伙伴携手共赢 HarmonyOS Connect伙伴峰会将落地上海
与伙伴携手共赢 HarmonyOS Connect伙伴峰会将落地上海
爱生活探未来 UDE国际消费电子博览会新闻发布会召开
爱生活探未来 UDE国际消费电子博览会新闻发布会召开
关于我们·About | 联系我们·contact | 加入我们·Join | 关注我们·Invest | Site Map | Tags | RSS Map
电脑版·PC版 移动版·MD版 网站热线:(+86)010-57255600
Copyright © 2007-2021 硅谷网. 版权所有. All Rights Reserved. <备案号:京ICP备12003855号-2>