统一信令下移动端视频会议系统设计与实现

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:liqing804240
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动互联网的高速发展、移动电子设备的硬件性能不断提升、网络基础设施日趋完善,从传统的2G、3G时代逐渐过渡到4G、5G时代,这些都给视频会议系统的移动化、智能化提供了更好的硬件基础。同时随着商业全球化的大发展,对移动端视频会议的多样化需求也在不断提高。移动端视频会议相对于传统视频会议在硬件设备、网络状况以及环境更为复杂,所以对移动端视频会议研究与实现逐渐成为热点。目前尽管商业视频会议厂商众多,但是由于内部协议的局限性,其扩展性完全依赖于厂商,面对移动端视频会议的多样化需求变得越来越难以定制及扩展,因此需要采用更加开放及优秀的音视频技术。WebRTC(Web Real-Time Communication)提供了包含音视频采集、编码、传输等视频会议的几乎所有的核心技术,其免费开源以及跨平台的支持,方便了视频会议的开发定制,本文基于WebRTC技术针对移动端特点设计与实现了一套移动端视频会议系统。移动互联网中移动设备状况复杂,性能千差万别,在对视频编解码的处理上有着极低的上限,视频群聊时的参与者众多,采用P2P(Peer-to-peer)方式导致视频码流数成倍增加,不适合多人会议。移动设备的网络环境复杂,网络波动较大,在接收端的视频质量不稳定,视频质量表现差异较大,视频显示不稳定。在视频会议由于商业合作产生互通时,基于WebRTC技术实现的视频会议在信令控制层的协议不同不能实现互通。本文针对移动端视频会议的这些问题做了以下研究:(1)设计实现了一套基于WebRTC音视频技术的视频单聊及群聊模块。针对视频群聊支持方案进行分析,设计并实现了混流模型下的视频群聊功能。其后针对在复杂网络下的视频通信进行处理,采用网络无缝切换、多运营商接入、优化码率控制算法等方式提高视频会议在网络波动和带宽波动的通信质量。(2)设计实现了适应移动端视频会议的图像超分辨率重建算法,在移动端的SDK设计中引入RAISR(Rapid and Accurate Image Super Resolution)算法,通过GPU运算提高重建速度,有效提高了低带宽下的视频质量(3)设计并实现了不同协议转换的统一信令网关。针对移动端视频会议之间的互通需求,对主流的SIP、H.323、XMPP等信令协议进行研究,通过统一信令网关对信令的转换来实现不同信令客户端之间的视频互通。(4)本文针对视频会议的视频传输质量进行分析,通过视频通话过程中的带宽、码率、丢包等数据进行监控验证,表明移动端视频会议在复杂网络下视频通信稳定,丢包率低于1%。在移动端对视频采用RAISR算法,在i Phone 6设备上单张图像重建速度在40ms,实验数据表明重建算法对移动资源消耗较低,在提高视频质量的同时能达到实时性的要求。针对通信信令网关下的信令连通状况及连通时间进行测试,实验结果表明连通成功率在95%以上,能够较好的应用于移动端的信令互通。
其他文献
Al基非晶合金的比强度高、韧性好、耐蚀性优异,因此具有广阔的应用前景。然而目前Al基非晶合金棒状试样的最大直径仅能达到2.5 mm,极大限制了该类材料的工程应用。深刻认识制约Al基非晶合金玻璃形成能力的因素、寻找更好玻璃形成能力的Al基非晶合金就成为非晶合金领域极其重要的问题。为此,本文首先总结分析了现有Al基非晶合金的成分设计理论,在此基础上提出了一种新的预测Al基非晶合金最佳成分的方法;接着开
本文为中国作家陈苍《地下三尺》第一章节的中译英翻译及该翻译分析。笔者翻译特定文化项目时将异化和归化理论应用于实践并提出熟悉性原则,作为一种解决不均衡和找到两者之间平衡的方法。结合中国文化的“走出去”和翻译的全球化趋势,进行了翻译分析。希望通过上述方法的适应,中国文化能够在西方得到进一步的弘扬。
随着大数据、物联网等平台的兴起,人们对于信息存储分析的需求井喷式增长,研发低功耗、低成本、高密度、高速的存储器迫在眉睫。阻变存储器因具有器件结构简单,存储读取速度快,尺寸小,功耗低,可三维集成等优势,是新型存储器的代表之一。本论文采用Ta2O5基阻变存储器进行研究。在传统的导电机制中,人们更多的关注点在Ta/Ta2O5界面。Ta/Ta2O5界面处因电激励产生的氧空位是导电细丝的主要组成。但在本论文
随着互联网和自媒体的发展,在线新闻的规模与传播范围得到了极大的扩展。面对海量的在线新闻文本,如何根据其描述的内容对其进行划分和聚集,以实现新闻事件识别,是一个值得研究的问题。这一技术不仅有利于各种组织机构及时、准确地发现新闻事件,而且是把握热点舆情、分析开源情报等自然语言处理任务的基础步骤。从技术层面看,部分现有的新闻事件识别算法仅考虑了语料的统计特征,却忽略了实体信息、同义词、一词多义等语义知识
目的探索酶催化合成方法,制备兼具抗菌和再矿化作用的银掺杂的磷酸钙材料新体系,并研究其在早期龋的防治中的效果及存在的作用机制,为安全有效的多功能磷酸钙类新型生物材料的构建及其在早期龋防治方面的进一步应用研究提供新方向和实验基础。方法以磷酸钙为主体材料,通过酶催化反应和抗菌金属离子掺杂结合的制备新策略,合成出具有银掺杂的无定形相纳米结构磷酸钙。首先,通过透射电子显微镜、傅里叶红外光谱、X射线衍射等方法
目的:出血性转化是急性脑梗死血管内治疗后最严重的并发症,会严重影响患者的预后。因此,许多研究者试图通过多种影像学或者临床资料预测脑梗死患者治疗后出血的风险。本研究试图根据急性缺血性卒中患者CT图像(CTA和NCCT)的纹理分析进行HT预测,并与传统临床评分方法进行预测效能比较。方法:收集141例急性缺血性脑卒中(AIS)患者,其中血管内治疗(EVT)73例,保守治疗(CST)68例。我们将研究对象
命名实体识别(Named Entity Recognition,NER)技术是对文本中的命名实体进行探测和分类的技术,是信息抽取(Information Extraction)技术中十分重要的组成部分。相对于传统的NER方法如条件随机场、支持向量机等模型,基于深度学习框架的NER方法逐渐成为了NER领域的主流。基于深度学习的NER方法利用文本序列中文字的词或字嵌入特征(word/char embe
文学作品的翻译一直是翻译中的重要组成部分。随着中外文化交流的不断深入,文学作品的翻译量与日俱增。小说由一组组事件构成,一个小句表达的是一个事件。本文从体识解的角度出发,先阐述体和体识解的定义及类型,再以短篇英文小说The Siege at Whale Cay的汉译为例,针对译文中事件语义截取的不同阶段进行实例分类和剖析,归纳出英汉翻译中事件体的截取特征,具体分类为:零度再截取和事件体再截取。其中事
模态指代事物发生的方式或是事物被体验的方式[1],多模态是两个或者两个以上模态各种形式的组合,当一个数据集或者研究中包含多个模态的时候,该研究即称为多模学习。在单模态研究的时代,学者们借助不同任务所提供的单模态信息进行模型构建,如推荐领域过去的研究使用用户对物品的打分构建推荐模型进行推荐,但随着多模态学习的兴起,推荐领域物品图片信息和用户评论信息的加入使得推荐效果取得的重大突破。多模态学习逐渐成为
近年来,嵌合抗原受体T细胞(Chimeric Antigen Receptor-T cell,CAR-T细胞)在B细胞白血病治疗方面已经取得了巨大的成就,但在B细胞淋巴瘤和实体瘤的治疗方面仍存在一定的局限性。优化CAR的结构从而提高CAR-T细胞的持续性和细胞毒性是CAR-T免疫治疗的新焦点。共刺激信号域是CAR-T细胞的重要组成部分,整合了CD28共刺激分子的CAR-T细胞能够快速增殖,但持续性