【摘 要】
:
现实世界中收集的数据集通常是含有缺失的,为了在不完备数据集上构建有效的机器学习模型,需要对数据集进行清洗。为了确保较好的清洗效果通常需要人工参与,从而导致大量成本。确定不完备数据的清洗优先级将有助于尽量减小清洗规模,节约人工成本。而计算不完备数据的清洗优先级应确定其对模型性能的贡献。夏普利值是目前流行的用来评估数据在机器学习模型中贡献的方法,因此可以借助夏普利值的概念计算不完备数据的清洗优先级。由
【基金项目】
:
国家自然科学基金(61932004);国家自然科学基金(61732003);国家自然科学基金(U2001211);
论文部分内容阅读
现实世界中收集的数据集通常是含有缺失的,为了在不完备数据集上构建有效的机器学习模型,需要对数据集进行清洗。为了确保较好的清洗效果通常需要人工参与,从而导致大量成本。确定不完备数据的清洗优先级将有助于尽量减小清洗规模,节约人工成本。而计算不完备数据的清洗优先级应确定其对模型性能的贡献。夏普利值是目前流行的用来评估数据在机器学习模型中贡献的方法,因此可以借助夏普利值的概念计算不完备数据的清洗优先级。由于现有工作缺少对不完备数据夏普利值的研究,首先基于不完备数据集的指数级的所有可能世界定义了一种不完备数据夏普利值的表示方法;然后基于K-近邻分类模型的效用函数,提出了一种多项式时间内计算不完备数据在K-近邻分类模型中夏普利值的近似算法;最后,提出了一种基于夏普利值的面向K-近邻分类模型的启发式数据清洗算法ShapClean。实验表明,该算法在清洗后模型分类准确率方面往往可以明显超过现有的针对机器学习模型的自动清洗算法,而且相比于同样需要人工参与的数据清洗算法该方法具有更高的清洗效率,可以有效节约人工成本,同时保证理想的模型准确度。
其他文献
毛冬青是治疗心力衰竭的常用药物。近年来的药理学研究表明,毛冬青及其主要有效成分对心血管系统具有促血管活性、正性肌力作用、抑制心室重构、抑制心肌纤维化、保护心肌细胞、抗炎和抑制血栓形成等作用。综述毛冬青及其主要有效成分对心血管系统的药理作用进展,可为毛冬青在心力衰竭临床治疗中的合理使用和基础研究提供参考。
介绍了硝化工艺及生产过程的安全控制;提出了从工艺本质安全、工艺安全控制、生产安全管理等方面提高工艺以及设备运行的安全性、可靠性和完好性,避免生产安全事故发生的建议。
<正>摘要目的本研究摘要目的是用半自动分段算法在3D旋转血管造影(3D-RA)上区别脑动静脉畸形(b AVM)的不同组成。材料与方法 15例病人(男8例,女7例;14例幕上
本文分析了建始县油菜产业发展现状、主要困境,并对油菜产业发展提出了针对性的对策建议。
为有效解决水性聚氨酯材料存在耐水性差、机械强度低等问题,采用交联改性及复合改性方式对水性聚氨酯材料进行结构的改变,形成耐久性、相容性、力学性能更优的改性水性聚氨酯建筑涂料。利用性能测试的方式,观察改性水性聚氨酯乳液是否存在沉淀,以此判断该材料的稳定性,并利用环氧树脂(E-54)的质量分数及加料顺序对涂料的影响进行分析,结果表明:当环氧树脂E-54质量分数为6%时,乳液性能较好。
目的:为探讨子宫肌瘤对未生育年轻女性生殖健康的影响,本文通过对未生育年轻女性子宫肌瘤病例的发病状况、发病因素及其临床特征、手术方式的变化,术后复发因素等项目进行统计分析,为未生育年轻女性预防子宫肌瘤的发生,早期诊断,个体化、规范化管理,保护生育力的诊疗提供临床研究资料。方法:本研究收集吉林大学第一医院妇科2017年1月至2020年12月期间因子宫肌瘤收入院,经手术治疗并经病理确诊为子宫肌瘤的患者3
目的提高临床检验人员的工作效率及对疾病诊断的准确率,消除制片时人为因素的干扰,提高血涂片的质量稳定性和规范性。方法设计并研制出新型半自动血液推片机,并按照标准血涂片应具备的条件,由行业专家对各级医院检验科检验人员利用手工推片法和血液推片机法制备出的血涂片给于评价,再利用统计软件进行结果分析。结果在临床检验工作中,推片机法制作出的满意血涂片比例显著高于手工法(三级医院P<0.05,一级医院P<0.0
目的 以人工智能技术发展的背景、起源、现状和未来发展路径为脉络,探讨人工智能技术为产品设计的构成要素带来的新特征。基于产品设计的新特征,提出智能产品情感交互设计的重要性和设计方法。方法 通过文献梳理法和案例分析法,提出在人工智能技术的影响下,产品设计从传统的物质表达进入到虚拟沉浸体验阶段,产品的传统功能也进阶到智慧功能的扩展,传统人机系统呈现出更加友好互动的交互趋势。在这种互动趋势的影响下,产品设
随着电子商务和移动支付的兴起,传统金融行业的发展迎来新的机遇,互联网消费信贷应运而生。互联网消费信贷挖掘了被传统金融行业忽视的“长尾客户”群体,增加了他们当期可消费的金额,长尾客户的流动性约束得以缓解。大学生作为长尾群体中的一员,消费观念新颖、消费意愿强烈,加之互联网消费具有使用门槛低、方便快捷等特点,因此大量学生群体被互联网消费信贷吸引。互联网消费信贷为因财力限制而不得不选择延迟消费的大学生提供