基于集成学习和SHAP优化的个人信贷违约可解释预测模型

来源 :山东大学 | 被引量 : 0次 | 上传用户:Maygzs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在社会经济高速发展的今天,人们提前消费的热情日渐高涨,随着“互联网+”和大数据技术的发展,信贷业务也在线上线下呈现出多种多样的业务形态。个人信贷业务需求量的不断增长使银行等金融机构获得可观的利润收入和大量的客户数据积累,但与此同时,由于监管审核不严格和信息差等因素,不良贷款率也逐渐攀升。因此,如何充分利用客户数据中的有用信息进行有效的信贷违约预测已成为急需解决的问题之一。论文基于真实信贷数据集,通过建立具有解释性的集成模型对借款人的违约行为进行预测,并可视化呈现影响预测结果的主要因素。首先利用单变量方差分析、特征转换与特征编码、特征归一化处理等方法完成数据预处理工作。然后,分别基于Logistic回归、XGBoost及随机森林构建个人信用贷款违约预测模型,并根据网格搜索法进行参数调优。在现有的随机森林模型的基础上,通过梯度提升的方法提高随机森林中单个基学习器的预测能力,并且用加权平均集成基学习器,以建立优化的随机森林模型。在模型评价指标方面,综合考虑AUC、召回率、F1值和准确率进行模型性能的评估。通过对比分析发现:对于本文所用数据集,集成模型普遍优于传统模型,XGBoost模型和改进随机森林模型有相对较好的分类效果和泛化性能,适用于进行信贷违约预测;对于同一测试集,在模型阈值相同的条件下,改进的随机森林模型的AUC值,对违约用户的召回率等主要评价指标均高于其他三个模型,说明其不仅对样本数据有较强的分类能力,而且能更好的识别违约用户。最后,引入SHAP解释框架对集成树模型进行可视化分析,分别从单个样本角度和模型整体角度探究模型重要影响变量及变量的影响效果,这在一定程度上解决了复杂集成模型可解释性较弱的问题,并且,在信贷实际业务场景中,基于SHAP的解释性图表可以帮助业务人员直观地分析影响用户信用评估结果的重要因素,方便进行人工干预和判断,具有一定的现实价值。
其他文献
随着建筑业的不断发展,建筑能耗迅猛增加,节能问题对社会来说是极其重要的,因此有必要研究替代能源,以及改进确保建筑微气候、热和冷供应的设备和方法。地源热泵系统是一种广泛使用且有效的节能设备,可以为建筑物提供热、冷源,是一种通过提取土壤中热量的可再生能源应用技术。本文以北京市某建筑作为研究对象,分别对地源热泵系统地源侧、机组侧、末端负荷侧建立数学模型,为仿真系统模型建立奠定理论基础。然后通过能源智慧管
学位
近年来,随着市场环境的日趋复杂,国家针对国有企业的发展出台了各种推动性政策。其中,电力企业与国计民生息息相关,是国有企业的重要支柱型代表,其规模较大,内部结构相对复杂。在电力体制改革的大背景下,我国不断出台电力新政策,其中农网改造引发的资产结构风险,电费收缴困难和举债经营带来的资金风险都会给电力企业带来财务风险,进而暴露出企业财务内部控制问题。因此研究电力企业的财务内部控制可以及时发现企业管理中存
学位
随着新高中物理课程标准的颁布实施,物理课堂教学正被要求贯彻物理学科的核心素养。不同于以往的“双基”和“三维目标”,物理学科核心素养强调培养学生的“物理观念”、“科学思维”、“科学探究”以及“科学态度与责任”。长期以来,我们的物理实验课流于形式,无法达成培养学生核心素养的目标。故本文以培养学生物理学科核心素养为目标,研究高中物理实验中电磁学实验设计的优化方式。本文包括以下几个部分:第一部分为绪论,该
学位
近年来,在互联网技术不断普及和贸易保护不断抬头的背景之下,国际市场的竞争愈加激烈,我国传统制造业企业在出口过程中的劣势也愈加明显,转型升级迫在眉睫。《中国制造2025》等中央出台的重要文件中都明确指出:延伸服务环节、增加高端服务要素投入、加快两业融合发展是促进制造业企业改善效率、获取差异化竞争优势的重要手段。然而,对于尚处转型初期的中国,也可能会产生“服务化悖论”。这种因素的存在,使得学术界无法对
学位
从报纸、电视、门户网站到现如今的社交媒体,随着科技与互联网技术的飞速发展,人们获取信息的途径发生了巨大的变革,从单一的、中心化的信息传播方式变成了人人都可以参与的自媒体时代。凡事都有双面性,人们在弹指间获取世界各地正在发生的时事新闻的同时,也面临着大量混淆视听的虚假新闻。打击虚假新闻对净化网络环境和提高媒体公信力有重大意义。作为近几年新兴的研究课题,目前虚假新闻检测方法存在着适用性不广、时效性滞后
学位
在国家“双减”政策的背景之下,社会越来越强调学校教育教学的高效性,同时,“核心素养”越来越多地进入到一线教学工作者的视野中。教师们面临着时代给教育带来的契机和难题,急需理清核心素养在一线教学实践中的定位。部编本教材自2016年发行以来,逐渐在全国范围内实现“一纲一本”的局面。笔者通过进行师生问卷和访谈,发现其“练习系统”得到教师和学生的高度认可,但使用率却很低,集中表现在教师不清楚练习系统的训练目
学位
近年来,随着献礼剧质量的节节攀升,其播放量和关注度也日益提升,建党100周年献礼剧《觉醒年代》更是独占鳌头,大放异彩。其以浓厚的历史底蕴、真切的创伤情感、绝伦的艺术呈现为观众架设了一条沟通历史和现实的桥梁,令受众争先参与互动,并由此进入笔者视野。在观察的过程中,笔者发现,虽然观众并未亲历百年前的历史,但通过《觉醒年代》的塑造,受众的集体记忆却无疑更加凝实,而《觉醒年代》对于集体记忆的建构,也是一个
学位
2020年新春伊始,一场突如其来的新冠肺炎疫情席卷祖国大地,至今疫情尚未结束。在我国社会主义制度强有力的保障下,经济在逐步复苏之中,政府出台了一系列减税降费、降低贷款利率等扶持政策,同时生产技术和信息技术的发展推动了我国食品行业的深入改革,给饮料企业发展提供了更多的机遇。随着人口素质的提高,消费观念在不断地升级转变,营销渠道线上线下双向发展,消费方式的快捷便利化,各类饮料企业百花齐放,该行业的残酷
学位
近年来,随着全球化竞争压力的不断加剧,中国银行业不断加快市场化的脚步,全面提升银行核心竞争力。作为银行发展零售业务的有力平台,信用卡业务在历经数十年的发展后,已经步入了精准化营销管理的阶段。Z银行大连分行在大连地区的信用卡业务起步较早,近期同业竞争愈发激烈,加之近年受疫情的影响,同时大连地区人口流失较为严重,新客户获客难度越来越大,优化客户关系管理、强化存量客户精细化经营愈发重要。分析2020年Z
学位
糖尿病是一种常见的慢性代谢疾病,会引发多种严重威胁人类生命健康安全的并发症,包括糖尿病性肾病和糖尿病性心血管疾病等,其相关的预防和治疗工作已经成为一个重大社会挑战。其中,糖尿病性心血管疾病是导致糖尿病患者残疾和死亡的主要原因,也是一种可防可控的疾病,做好糖尿病性心血管疾病的早期干预和治疗,可以有效控制疾病进展,提高糖尿病患者生存率。因此,寻求一种有效的糖尿病性心血管疾病风险评估方法,用于疾病的早期
学位