基于强化学习的码率自适应优化算法及其在水质监测中的应用

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:eddiew
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
根据思科全球移动数据流量白皮书(2016-2021)的预测显示,视频流量在2021年将占到全球移动数据流量的四分之三。为应对视频数据爆炸式增长的需求,国际标准组织MPEG联合各大科技公司制定了HTTP自适应流(HTTP Adaptive Streaming,HAS)技术的国际标准(Dynamic Adaptive Streaming over HTTP,DASH),亦称为MPEG-DASH标准。MPEG-DASH标准对音视频的内容格式、传输方式和业务控制等都规定了具体的技术参数,但开放了客户端视频片段获取策略的定义。因此,研究码率自适应算法对视频数据按照MPEG-DASH标准进行播放具有较大的应用价值。现有的码率自适应算法大多是基于启发式方法的实现,该方法一般是根据特定网络条件通过硬编码实现码率的自适应,这导致基于该方法的码率自适应算法无法有效应对网络环境的变化。此外,也有不少学者利用强化学习算法应对网络环境变化情况下的码率自适应问题,这些算法往往采用强化学习中的Q学习算法来学习得到优化码率自适应的策略。尽管相比较于启发式方法,Q学习能获得较高的用户体验质量,但Q学习却存在难以编码连续的状态值和在大状态空间下学习收敛慢的不足。为此,本文结合最近邻算法,设计了一个可以处理状态为连续值情况下的Q学习算法。此外,针对Q学习收敛速度慢的不足,结合大脑关于神经元群体编码的理论,提出了一个群体编码Q学习算法。论文的主要工作总结如下:1.结合最近邻算法,设计了一个可以处理状态为连续值情况下的Q学习算法。实验结果表明,基于最近邻Q学习的码率优化算法具有更高的用户体验质量。2.针对Q学习在大状态空间下收敛速度慢的不足,结合大脑关于神经元群体编码的理论,提出了一个群体编码Q学习算法。3.开发了流域水质监测的视频流数据管理平台,达到了全流域实时监测、集中式统一管理以及多监测点间联动监测预警的效果。
其他文献
随着智能电网的不断快速推进,电力系统已经迈入了“大数据”时代。各种电网设备的监测数据被送达监测中心,形成了海量电网流式数据,需要对其进行快速处理。传统的单机处理方式在面对海量电网流式数据时,存在实时响应能力差、可靠性低等问题,而当前云计算技术在各行各业的广泛应用为电力行业大数据的处理提供了新思路。云计算技术中的Storm流数据处理框架,具有高吞吐量、实时性强等特点,满足电力系统实时持续监测数据的处
本月国内粮油市场涨势趋缓,小麦价格出现回落。本月全国粮油批发价格指数中粮食批发价格指数为138 0 4 ,比上月上涨3 2 3% ;食用油批发价格指数本月为10 3 83,比上月下跌0 1
目的:探讨远端输精管冲洗取精术联合卵泡浆内单精子注射(intracytoplasmic sperm injection,ICSI)治疗功能性不射精症(psychogenic anejaculation,PAE)性不育的疗效。方法:回顾性分
在学生中存在着一种非正式群体活动的现象。班主任为了建设良好的班集体就必须重视这一客观存在的现实。对它做好针对性地教育、管理工作.从而保证学校教育目标的实现。
【正】 1975年,扬州甘泉山以南、老虎墩以西的地方,发现一座汉代砖室墓,出土了一件东汉熹平五年刘元台买地砖券,一件小灰陶罐(可能是陶灶上的)和一面"长宜子孙"铜镜。砖券,外
教代会提案工作是高校民主管理的一个重要内容。在分析传统教代会提案工作现状的基础上,提出了高校教代会提案系统的需求分析,并予以设计实现。系统采用B/S架构,集中部署、分
随着人工智能的快速发展,“互联网+”时代向“智能+”时代迈进,创新能力成为经济社会发展的命脉,而作为社会人中佼佼者的人才,在某种程度上引领着时代的发展方向,是经济社会可持续发展的动力。区域所承载的人才资源的多少以及质量的高低,直接决定着区域的发展水平和潜力。人才集聚是凝结于人才本身的知识水平和综合能力的集聚,人才的集聚能推动区域经济发展,从而为人才的成长构筑基础阵地。为此,政府应出台积极的人才政策
裁判要旨$$审理电商平台知识产权侵权案件时,侵权人存在刷单行为的,法院应扣除刷单虚假销量,依据实际销量计算赔偿额;同时,应计入权利人因刷单受到的销量、定价、商誉等间接损失,以
报纸
<正>习近平总书记指出:"惟改革者进,惟创新者强,惟改革创新者胜。"40年来,一个个细胞被激活、一张张"改革创新图"铺展、一个个"第一"不断涌现……作为国民经济的重要支柱,国
在制造业型企业的管理中,物料管理是最关键也是最重要的管理内容之一,一般性企业是利用MRP来对物料进行科学的管理.但对于ET0企业来说,由于他生产批量小,研究性强使其物料管