声网受邀ArchSummit 解析全球首个大数据驱动的实时通信监控系统

日期:2017-07-11 作者:网络更新 出处:网络我来说两句(374)

2017年7月7日-8日,由infoQ主办的ArchSummit 2017全球架构师峰会在深圳如期举行。全球实时云服务开创者声网Agora.io(以下简称声网)受邀出席,声网首席数据架构师,数据平台负责人何丰做了《质量实时监控:全球音视频实时传输的关键帧》的主题分享,全面介绍了声网从创立之初开始如何搭建大数据实时监控平台确保高质量QoE通信服务,并结合多年技术实践进行详细说明。 声网是全球第一个提供有质量保证QoE的实时通信技术服务商,也是全球首个和唯一提供实时通话监控平台的服务商。声网为全球超过3万的开发者,提供实时音视频通话和互动直播连麦SDK,让开发者轻松接入SDK即可在App和Web都实现音视频通话和互动直播连麦功能。ArchSummit全球架构师峰会是InfoQ中国团队推出的面向高端技术管理者、架构师的技术大会,参会者中超过一半以上拥有8年以上的工作经验。 声网受邀ArchSummit 解析全球首个大数据驱动的实时通信监控系统 会上,声网首席数据架构师,数据平台负责人何丰表示,一次通话的传输过程,包含很多个环节,每个环节的质量,会对整个服务的质量、乃至用户体验产生巨大影响。影响通话质量的因素很多,有接入质量,传输质量,用户的设备,软件集成的问题等等。保证通信质量,并不容易。声网的实时质量检测系统从一开始就对数据进行实时监控,包括通话的体验、节点表现、路由表现、编码表现。“有了这些数据,我们就能够对通话过程的情况进行诊断或者进行事后的深入复盘。“声网首席数据架构师,数据平台负责人何丰说道。 2014年创立之时,声网在全球率先使用大数据平台做监控和实时保障,一方面给内部研发提供丰富的质量数据支撑,另一方面逐步开放给声网开发者,对通话质量“心中有数”。何丰介绍说,当时做数据平台的初衷,是参照了美国NASA的数据驱动方式来做的数据监控系统。“我们全程实时监测用户的通话体验,这个用户接入网络好不好、我们的接入节点工作不工作、我们的智能路由有没有找到最优路径、SDK有没有正常编码。有了这些数据,我们就能像监控卫星运转一样,对通话过程的情况进行诊断或者进行事后的深入复盘。我们的目标是做到整个通信服务的质量是可感知和可保障的,可以说我们是全球第一个使用大数据平台做监控和实时保障的通信技术服务商,”何丰说道。 何丰在现场展示了声网的实时监控系统架构图,演示了如何通过对基础网络的监控,端到端的监控,用户体验的监控,告警系统,以及个例调查,给开发者提供超低延时,高可用有 QoE质量保证的传输服务。 何丰表示声网的实时监控体系,包含几百个指标,每个用户的数据都要实时收集、实时分析。所以,需要一个稳定的架构来支撑这样的海量数据和运算量。 声网的客户端和服务器节点是全球分布的,要保证端到端的质量监测,需要从四个系统来进行监测:“第一是全球实时数据上报和收集。第二是实时计算系统、第三是实时存储系统、第四是离线存储系统。实时收集是为了解决全球数据实时上报的。实时计算系统我们是做一些数据的实时统计和分析,有异常的时候进行告警。实时存储是把这些数据进行实时收集起来,能够做实时调查的一些工具,这里会用到HBase。最后是离线存储,我们后面会做整体的质量分析。”何丰说道。 声网的质量检测体系包含4个层面,基础网络质量、基础服务质量、端到端传输质量, 用户体验质量。要实现这四个层次的监测,首先需要对其所包含的上百个指标进行清晰定义。“比如说用户设备上播放视频的帧率、首帧视频的延迟、画面渲染的质量、声音播放的频率是否有卡顿或者声音是否能播放出来;其次是接入服务器的服务质量,比如说有百分之多少的响应时间是在1秒以下的,还有端到端的质量,比如丢包、延迟、抖动,还有基础网络质量,比如两两机房之间的丢包、延迟、抖动的质量,这些数据都要收集起来。”何丰说道。 目前,这个数据监测系统一天规模是一千亿条指标数据。并且在随着用户量的增加,逐渐提升。“目前声网整体监控的延迟性能大概是10s以内,从终端用户体验到接入到大网通话开始到结束,所有的环节我们都能监控起来,所有的通话都可以回溯,任何一通通话出现问题,我们都能找到原因。”何丰说道。 >

IT新闻头条推荐
新闻焦点 | 新闻专题
  1. 尖叫可为手机充电
  2. 5月中国互联网公司掀赴美上市潮
一周热点新闻排行
  1. 海尔全空间保鲜冰箱获中国首批“A+性能”认证0
  2. 摄像头遭入侵?“密九联”来助力0
  3. 家装三巨头围剿“传统家装”法师 、坦克、辅助,各显其能0
  4. 印度GST改革利好中国品牌:酷派6月销量翻番,7月再发新品0
  5. 中科创达成中国移动5G联合创新中心合作伙伴0
  6. 8848手机亮相巴黎高定时装周,打造新一代时尚单品0
  7. “废太子”俞永福,搞不定高德这张旧地图0
  8. 顺逛“三店合一”模式斩获2017ECI Awards商业模式创新大奖0
  9. 性能怪兽最强王者,安卓旗舰一加5上手评测0
  10. 极致曲线诠释新手感体验 一加 5 星辰黑图赏0
人物周刊
  1. 雷鸣 酷我科技公司首席执行官
  2. 雷鸣,北京酷我科技有限公司首席执行官,毕业 于北京大学。曾任百度高级工程师。北京……
科技新知
  1. 尖叫可为手机充电
  2. 脖子上的“空调”
备案编号:4406043011566 经营许可证编号:粤B2-20050807 网站备案号:粤ICP备09124497号
Copyright © IT.com.cn All rights reserved. IT世界网 版权所有
特别说明:IT世界网从2011年底官方停运,现全部内容采集于互联网,如有侵权或相关问题,请及时联系我们删除相关内容:2942312186@qq.com。
mr007亿万先生