稳健变量选择方法的若干问题研究

来源 :复旦大学 | 被引量 : 6次 | 上传用户:jnyinli
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
变量选择是统计建模的一项基础而重要的工作,我们希望一个好的统计模型应该只包含那些少数的与响应变量真正相关的协变量,以达到比较好的预测效果。另一方面,我们希望变量选择方法是稳健的,尤其是当数据中存在异常值时,变量选择的结果不至于受到很大影响而变得不稳定。本文的研究目的是对纵向数据或者更加复杂的高维带有删失的数据,提出一系列稳健的变量选择方法。本文的主要结果和创新之处在于:第一,我们介绍纵向数据在线性回归模型中的稳健变量选择方法。我们建立了惩罚稳健估计方程,给出了高效的算法,并证明了在某些条件下,我们的变量选择方法具有Oracle’性质(Fan等(2001)[26])。我们在模拟中比较了几种文献中常用的惩罚函数的效果,特别比较了当数据中存在异常值时,稳健方法和非稳健方法的表现。我们还将该方法用在一组实际的医学黄体酮激素纵向数据中(数据下载网址:http://www.lancs.ac.uk/diggle/.),进一步说明我们方法的实际效果。该方法的创新之处在于对可能存在异常值的纵向数据,我们的方法效果稳健,而且通过在惩罚稳健估计方程中加入相关结构,可以提高变量选择和估计的效率。第二,我们对纵向数据的线性混合效应模型,提出了一种稳健的对固定效应和随机效应同时进行变量选择的方法。我们通过EM算法来计算估计结果。我们证明了在自适应的LASSO惩罚函数下,我们的变量选择方法具有Oracle’性质。在模拟中,我们分别在固定效应和随机效应以及响应变量中加入异常值,来考察我们方法在各种情况下的稳健性表现,模拟结果表明我们的方法对各种污染方式都具有较好的抵抗能力。最后,我们将所提的方法用到黄体酮激素数据和CD4数据实际数据中(下载网址同上),进一步阐明方法的实际意义。该方法的创新之处除了对异常值的稳健性以外,可以对固定效应和随机效应同时进行变量选择,这样可以避免对模型有过多的可能误判的先验性假定。第三,我们针对更加复杂的超高维带固定删失的截面数据,利用比较稳健的惩罚分位数回归的方法,提出一种两步变量选择和估计的方法。我们证明了当删失概率能够被相合地估计时,第一步变量选择具有很好的降维效果,并能达到接近最优的收敛速度,在此基础上,第二步的变量选择能够修正第一步的偏差,达到Oracle性质。我们还将该方法用在分析一组实际的Boston房价数据中(数据下载网址:http://lib.stat.cmu.edu/dataset8/boston-corrected.txt),得到的结果说明我们的方法能够很好地处理高维带有固定删失的数据。本文总共分为五章.第一章绪论,主要进行文献综述,介绍本文的研究背景、研究动机及主要研究内容.第二章介绍纵向数据的线性回归模型的稳健变量选择方法,包括估计方法,算法,大样本性质和证明,数值模拟和实例分析.第三章研究纵向数据的线性混合效应模型的稳健变量选择方法,包括估计方法,算法,理论性质和证明过程,数值模拟和实证分析。第四章主要讨论超高维带有固定删失的截面数据的稳健的变量选择方法,内容有方法介绍,算法,理论性质及证明,数值模拟和实例分析。第五章对本文研究结果进行总结,并对新的研究方向进行展望.
其他文献
介绍了龙东矿选煤厂为适应市场的要求和入洗原煤的煤质变化,通过加强煤质管理、改造块煤系统、减少入洗原煤量等措施,对原有生产系统进行了改进,取得了较好的经济效益。
湖州市第三人民医院迁建工程是湖州市政府根据市政建设和医院发展的需要,于2009年6月由湖州市发改委批准立项的湖州市重点工程项目,是湖州中心城市10项民生建设工程之一,也是
相干光通信系统中,传统的盲相位搜索(BSP)算法具有良好的激光线宽容忍度,但传统BSP算法的高计算复杂度限制了其应用场合。针对这一问题,提出了一种低复杂度的相位噪声估计方
通过对机组协调控制对象和AGC的特性分析,论述了影响火电机组负荷响应的主要因素,并提出了提高火电机组对AGC响应速度的方法。
根据岩相特征将玉北地区蓬莱坝组白云岩分为粉细晶基质白云岩、粗晶基质白云岩和鞍形白云石充填物。鞍形白云石充填物各类地化特征都与粗晶基质白云岩相似,是粗晶基质白云岩
案情简介2007年8月,某市某房地产开发有限公司法定代表人张某,因办理房屋产权证缺乏资金,向李某借款250万元,承诺两个月内归还。李某与张某共同到银行办理了李某借给张某250
目的扩散加权成像技术是一种能够检测活体组织内水分子扩散运动的无创方法,其对数据的准确度要求较高且对噪声较为敏感。扩散加权图像的自相似性程度高,纹理细节较多且纹理和
关于能否用一种叫做"正义"(Justice)的道德规范来评判政治领域的行为实践,一直是政治哲学研究的核心问题之一.20世纪60年代末70年代初,西方新公共行政学派对社会公平价值观的
建党前毛泽东推动马克思主义在湖南传播的努力有:创办《湘江评论》和文化书社;成立俄罗斯、马克思研究会;批判改良主义和无政府主义等,并形成了鲜明的特点。
我国改革和发展的主题之一是构建社会主义和谐社会。和谐社会建设与性别和谐有着密切的关系.性别和谐是和谐社会的题中应有之义。本文分析了和谐社会话语下性别和谐的障碍因素