基于人工智能的星际争霸Ⅱ智能体研究与实现

来源 :西南交通大学 | 被引量 : 0次 | 上传用户:daemon999
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着人工智能技术的发展,人工智能技术已经在许多游戏领域取得了超越最顶级人类玩家水平的成绩。但是,其在星际争霸类即时战略类游戏中并没有取得令人满意的成绩。因为,星际争霸类游戏是由不完全信息博弈、巨大动作空间、实时性需求、长期规划和多智能体协作等多个问题构成的复杂性系统问题。目前,许多表现优异的星际争霸II智能体大都依赖于硬编码策略,几乎不能因对手所采取的策略的不同而做出适当的调整。本课题使用深度学习算法从顶级玩家的比赛游戏回放中学习玩家的生产策略,并将学习到的生产策略应用到现有的复杂智能体中,从而提高其竞争性。本文首先通过预处理、解析、提取游戏特征等流程从SC2LE(StarCraft II Learning Environment)提供的120多万场游戏回放中构造数据集。然后使用LSTM网络训练预测人族对抗人族、虫族和神族的下一步生产动作的网络模型,分别取得了80.19%、80.05%和79.58%的准确率。接着再将训练的预测人族对抗各种族下一步生产动作的网络模型集成到星际争霸II开源智能体——CommandCenter中,改进其原有的Production Manager模块和实现其未完成的BuildOrder Prediction模块,从而形成新的使用人族的智能体——newbot。最后,我们将newbot提交并参加专为星际争霸II AI举办的天梯赛——StarCraft 2 AI Ladder中,以测试其有效性。到StarCraft 2 AI Ladder第七赛季截至时,newbot在40个参赛智能体中取得了第8名的成绩。本文首先介绍了星际争霸II智能体的研究意义、背景、国内外研究现状以及论文的主要内容和论文章节安排;接下来详细介绍了基于SC2LE构建游戏特征数据集;然后介绍了预测人族对抗各种族下一步生产动作的算法;最后介绍将训练得到的模型集成到智能体中的方法和与其他智能体对抗的测试结果,并对论文工作进行了总结,对未来研究工作进行了展望。
其他文献
本文旨在探讨中国当代文学(特别是80年代以后)的乌托邦书写,研究焦点置放于那些具有乌托邦书写特征的小说上,格非的“江南三部曲”乃是本文的文本探究对象。格非“江南三部曲”以乌托邦书写的文学形式,透过文字来虚构各种“乌托邦”,表达了作家对晚清以来中国追求理想社会的历史回顾,并且对为了实现“共产主义乌托邦”而发动的乌托邦运动的本质进行了深入反思。这种乌托邦书写的文学形式在当代文学的小说版图中别树一帜。本
目的:探讨磷酸果糖激酶1(Phosphofructokinase 1,PFK1)在原发性痛风性关节炎(gouty arthritis,GA))患者外周血中的表达变化及其临床意义。方法:(1)收集115例原发性痛风性关节炎(gouty arthritis,GA)患者,[其中急性期痛风性关节炎(acute gout,AG)患者44例、间歇期痛风性关节炎(intercritical gout,IG)患者
本文试从在职工程硕士学习的宏观与微观特点入手,分析高校在职工程硕士研究生教育工作应当遵循的基本原则,以不断提高高校在职工程硕士教育的科学化、规范化水平和实效性,有针对
随着民用卫星专业的快速发展,新型火箭也从军用载荷发射过渡发展到军/民用载荷发射。这就预示着一箭多星技术将会广泛应用,而对于测量系统,就要实现适应多种卫星各类指令参数
缩小城乡差距,建设社会主义新农村,构建和谐社会,提高农村人口素质是关键因此,探索农村教师教育改革发展的有效途径,提升农村师资队伍的整体素质,提高农村教育教学质量具有十分重要的现实意义    一我国农村教师教育的突出问题    1.教师数量不足,城乡配置不均衡  我国贫困地区中小学教师整体数量不足,总的分布情况是城市超编,农村紧缺,城乡分布极不均衡2004年,西南师范大学教育科学学院一课题组调查得出
我国改革开放几十年来,城市化进程不断加快,人民生活水平提高的同时,随之而来城市管理面临的压力、矛盾也日益增大,另一方面随着公众维权意识加强,通过投诉反映诉求、维护权益,是社会公众参与政府行为的重要渠道和常用手段。城市管理工作由于管理内容繁杂涉及城市生活的方方面面,并且在执法过程中产生的矛盾尤为突出,所以在城市管理行政执法领域产生的各类投诉内容多种多样,数量巨大。处理好公众关于城市管理行政执法的投诉
先秦时期是“大一统”观念的孕育和形成的重要时期。夏、商时期 ,王权与专制主义得到了充分的孕育和初步的发展 ,天下一统的朦胧的政治理想已开始初露端倪。历代王朝对邑外的
围海造地在我国沿海省份有悠久的历史,它为沿海地区发展提供了土地后备资源,缓解了人地矛盾。随着经济建设的加速发展,我国土地的需求持续增加,围垦的规模也越来越大,对围垦
隐喻的本质是通过另一类事物来理解和经历某一类事物。莱考夫和约翰逊的概念隐喻理论主要研究日常生活中普遍存在的、系统化的常规隐喻。隐喻与文化密切相连,不仅反映民族文化