具有自营业务的虚拟运营商组网策略研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:jinxiangjinshu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在中国,一些电子商务平台(E-commerce Platform,EP)公司,如阿里巴巴和京东,现在已经被允许与网络运营商(Network Operator,NO)合作,作为虚拟网络运营商(Virtual Network Operator,VNO)为移动用户(Mobile User,MU)提供移动数据服务。然而,在具有自营业务的电子商务平台公司成为虚拟网络运营商后,如何通过适当整合虚拟网络运营商业务和公司自身的电子商务业务,为所有网络参与者,包括运营商、虚拟运营商、电子商务商家和移动用户,创造更多收益,是一个值得研究的问题。传统地,在网络经济学方面一般采用博弈论的工具来建模和研究合作式或者非合作式博弈中各参与方的策略设计,以期望寻找到博弈的纳什均衡(Nash Equilibrium)点。近年来,深度学习和强化学习等方法取得了极大的进展,越来越多地被运用到通信领域中的通信、计算等资源联合分配的问题上来。本文以兼具虚拟运营商和电商平台双重身份的公司为例,考虑其通过数据奖励的方式吸引更多用户来投放广告,先采用斯塔克伯格博弈的方法来研究静态博弈的场景以寻找到纳什均衡点,然后采用多智能体强化学习的方法对动态博弈场景下运营商和虚拟运营商双方的策略进行研究,并与静态斯塔克伯格博弈得出的纳什均衡点进行比较分析。首先,本文阐述了博弈论和强化学习的理论基础。具体地,先介绍了博弈论的分类情况,每一类别所适用的场景和问题特点,尤其介绍了纳什均衡和斯塔克伯格博弈的概念。然后,介绍了强化学习,特别是Q-learning和深度Q网络方法的基本思想和模型以及算法的具体分类和特点。然后,针对单运营商单虚拟运营商信息单向透明下的静态博弈的场景,我们提出了一种新颖的通过移动数据奖励来进行广告投放的机制,并将其建模为一个四方参与的三阶段的斯塔克伯格博弈。在第一阶段,运营商决定出售给虚拟运营商的移动数据的价格;在第二阶段,虚拟运营商决定其对移动用户的数据套餐费用和对电子商务商家(E-commerce Merchant,EM)的广告价格;在第三阶段,移动用户自己决定数据套餐的订阅和观看广告的数量,而电商商家决定他们从电商平台购买的广告时段数量。我们通过逆向归纳法得到纳什均衡的闭式最优解。仿真结果显示了系统参数对博弈参与者的效用和社会福利的影响,并揭示了该解决方案在某些情况下确实可以导致四赢的结果。同时,我们总结了一些具有经济指导意义的结论。最后,针对单运营商单虚拟运营商信息不完全下的动态博弈的场景,我们提出了基于多智能体强化学习的deep Q-network算法,解决了运营商和虚拟运营商双方只能获取到部分环境信息的情况下的博弈问题。仿真结果表明,所提出的强化学习算法可以使运营商或虚拟运营商学习到比较好的定价策略,并且一般情况下至少一方的收益会比静态博弈下的纳什均衡状态下的收益要高,证明了信息不完全博弈的场景下所提DQN算法的有效性。
其他文献
目的:BMI(体质指数)是衡量一个人健康状况的重要标志之一,与脂肪分布密切相关,握力是上肢力量及全身肌力的反映,同时也是个体身心是否健康的重要预测因子,不同类型的大学生其握力水平可能并不相同,且对握力的测量大多选用的是绝对握力,鲜有研究者评估相对力量,因此本文旨在探究不同BMI分级下大学生最大握力、握力体重指数的差异以及大学生BMI与握力水平的相关性,以期为运动促进健康提供新的依据。方法:在山东师
随着时代的发展和计算机技术的广泛运用,各类新型教育模式层出不穷,而基于计算机技术和互联网科技的网络教学模式成为目前备受关注和广泛运用的新型教学模式,创客教育就是其中一个代表性的产物。创客教育学习的最终目的是培养学生跨学科解决问题的能力,它包含很多学科的领域范畴,其中最重要的两门学科就是数学和物理,时下流行的STEM教育有其独特的地方,但是和创客教育在很多地方也比较类似,它们的目标都是有效的整合各类
目的:分析居民门诊和住院服务满意度、不满意原因,为公立医院高质量发展策略提供研究和讨论。方法:对2013年、2018年第5次和6次国家卫生服务调查数据中的居民门诊、住院服务满意度评价指标数据进行分析,采用两组等级资料的Mann-Whitney U检验进行门诊(住院)服务评价差异分析,采用排列图分析患者门诊(住院)服务不满意的主要原因。结果:5年间,城乡居民对门诊和住院服务的就医机构环境、对医护人员
<正> 我们使用上海化学试剂研究所生产的铁蛋白放免药盒,进行了耳血与静脉血血清铁蛋白含量的比较;观察溶血标本与非溶血标本、血液存放时间和存放方法对血清铁蛋白值的影响。报告如下。
期刊
云冈石窟管乐器雕刻于23个洞窟内。现存各类管乐器248件,大致可分10种:横笛、义觜笛、胡笳、排箫、法螺、埙、笙、竖笛、筚篥、异形笛,系仿实物雕刻出来的古代乐器,在烘托佛教极乐世界的同时,展现了5世纪北魏平城地区人们的音乐生活场景,反映了1500多年前东西方文化交流的融合发展状态。
济阳坳陷具有丰富的页岩油资源,2019年以来,陆续有YYP1,FYP1,BYP5等多口井获得峰值产量超100 t/d的高产工业油流,展现了良好的勘探开发前景,总结济阳页岩油地质特征,分析其富集高产规律,对于实现页岩油经济有效开发具有重要指导意义。在对济阳页岩油勘探开发实践回顾的基础上,通过对济阳页岩油岩相特征、储集空间、含油性、可压性的系统研究,认识了页岩油富集高产的主控因素。研究表明,济阳页岩油
政工干部,即负责企业政治工作的干部。政工干部是企业思想政治工作的实践者与组织者,是企业发展过程中重要的思想保障、组织保障与纪律保障。政工干部主要负责企业的教育、监督、管理与服务。随着近年来我国经济的发展,新形势下为了更好地促进企业的进步与发展,对企业政工干部提出了新的要求,政工干部的培训也要适应时代的发展。文章主要针对新形势下企业政工干部培训工作存在的问题进行了探讨,并对企业政工干部的培训工作提出
<正>在大数据时代,要对农村财务的审计和监督工作进行全面的探索,以切实推动农村经济效率的改善。这就要求有关部门要善于发现农村财务审计监督中的问题,明了大数据时代的财务审计监督对策,为乡村振兴做出应有的贡献。
期刊
课堂提问是课堂互动的一个重要环节,是检验课堂教学质量最有效且直观的方法。课堂提问的效果在一定程度上直接反映学生的课堂参与和学习状况。受新冠疫情的影响,国际中文教育事业面临许多挑战,主要表现为教学形式由线下教学转为线上或线下-线上相结合的形式,而这一转变也引发了一系列有关线上教学互动如何开展的讨论。国际中文实习教师在线上教学中的课堂提问能力如何?这是值得进一步探讨的问题。本文从自我叙事研究的角度切入
新形势下,在企业党校的教育教学工作中,要形成一整套的教育教学制度,注重分析、把握问题,开展多层次、系统化、新颖、实用的教育教学活动,以提升教学品质为突破口,使教育和训练的资源得到充分整合,从而达到提升教育和训练质量的效果。