基于惩罚最小二乘回归的超饱和试验因子筛选方法

来源 :北京大学 | 被引量 : 0次 | 上传用户:lailinyang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如何通过统计方法从大量的备选因子中选取少量的活跃因子,是复杂系统研究中的重要课题之一。超饱和设计是一种解决试验中因子主效应(含截距项)个数p大于设计中不同水平组合个数n的有效设计方案。由于其节约、高效的特点,被广泛应用于复杂系统因子筛选试验中。惩罚最小二乘法,即在最小二乘回归的目标函数中加入对非零系数的惩罚项,是一种广泛应用的变量筛选统计方法。本文针对超饱和设计下的试验数据,在惩罚最小二乘框架下研究了大量因子的有效筛选问题。   Fan and Li(2001)引入了一种SCAD(Smoothly Clipped Absolute Deviation)惩罚函数来研究变量筛选问题,并在p<n的条件下证明了由这类惩罚函数导出的估计当n→oo时具有大样本“Oracle性质”。这里,“Oracle性质”的意思是,零系数的估计以趋近于1的概率为0,非零系数估计的渐进分布与已知零系数条件下的渐进分布一致。本文借鉴边缘桥估计的思想,基于这种惩罚函数提出了一种新的边缘SCAD估计来解决超饱和设计下的变量选择问题,并在p>n的条件下,证明了该估计当n→oo时具有大样本“Oracle性质”。在边缘SCAD适用的条件下,本文利用聚类的思想,提出了一种新的变量筛选算法。计算机模拟显示,该算法比Bayesian方法(Chipman et a1.,1997; Beattie et al.,2002)、 Dantzig Selector(Candes and Tao,2007)、 PLSVS(Zhang et al.,2007)、 SCAD方法(Fan and Li,2001)有更高的准确率挑选出非零系数,对模型中非零系数个数的估计也更加准确。   在惩罚最小二乘回归方法中,惩罚函数的选择十分重要。历史上引入了多种惩罚函数,如LASSO估计的Li惩罚(Tibshirani,1996)、桥估计的Lq惩罚(Frank and Friedman,1993)以及最小最大凹惩罚(MCP(Minmax Concave Penalty))(Zhang,2009)等。本文在综合比较这些函数的基础上,提出了一类条件更宽泛的惩罚函数族P,其包含上述的SCAD、MCP惩罚函数作为特例。在p>n条件下,本文证明了由这类宽泛惩罚函数P导出的惩罚最小二乘估计当n→∞时具有近似的“Oracle性质”。特别地,针对SCAD、MCP和函数族P中的指数积分惩罚函数,本文基于五个E(S2)最优超饱和设计、每个设计选取两种非零效应个数这10种不同的组合情形进行模拟计算比较。结果显示,在最优参数选择下,MCP、指数积分、SCAD分别平均有99.2%、98.8%、91.4%的正确模型识别率。指数积分函数的正确模型识别率比SCAD和MCP受参数影响较小,在实际计算中,其能在更小的范围内搜索最优参数,节省时间。
其他文献
我国城市化现已进入了加速发展阶段,城市化质量的高低不仅反映了城市化整体的发展质量,更影响到我国社会、经济、环境、资源、人口的均衡发展。  本文首先综述了城市化质量的
本文从算法和复杂性的角度对一些网络排序问题进行了研究。经典的排序模型假设所有任务和资源(通常称为工件和机器)位于同一场所,从而不需要考虑工件的运输时间或机器的旅行
学位
独立成分分析(ICA)是用于盲信号分离(BSS)的一种有效的统计学方法,迄今已有二十余年的发展历史.实际上,独立成分分析的数学模型和求解算法不仅能够有效地解决盲信号分离,而且在其它
学位
海上武器试验时,靶船在单点锚泊的情况下,定向侧推系统完成船体的航向调整。定向侧推系统工作时无人值守,通过遥控软件完成系统的远程遥控和工作状态监视。软件的遥控接口为R
量子密匙分发(QKD)在由一条量子信道和一条经过认证的经典信道连接着的通信双方建立一个安全码。QKD源的光子数分布信息对安全分析至关重要。实验中,使用一种被称为被动式方案
本文考虑几类描述细胞分裂生长的偏微分方程模型.全文共分五章.   在第一章,我们研究一个二相细胞分裂模型.这个模型描述细胞分为休眠态(前期)和繁衍态(后期)两个不同生长
在无线传感网络中,大量的传感节点部署于检测区域内来获取准确的信息,高密度部署的节点检测到的信息有着较强的相似性,直接传输大量的冗余数据会造成较大的通信时延和网络能
在工程可靠性设计领域,由于实际工程结构的复杂性,现有的计算方法往往难以直接准确的得到计算结果。采用有限元分析方法并与可靠性理论相结合,可以有效地计算出结构的可靠度指标
学位
提问是教师最重要的语言活动,是教学技能的一个重要组成部分,尤其在当今新课程理念下的课堂提问设计又显得特别重要.它左右着教的内容和质量,是决定教学成败的一个重要因素,
2005年6月14日上午,开封空分集团公司向土耳其出口的15000m~3/h空分设备合同签字仪式在开空技术中心会议室举行。该套设备交货期为11个月,采用内压缩流程。这是迄今为止开空