城市直播房产教育博客汽车
汽车报价
买车新车
博客专栏
专题精品
教育留学
高考读书
房产家居
彩票视频
直播黑猫
投资微博
城市上海
政务旅游

风控模型黑箱可解释,试下这个方法来演示

12月8日 听风行投稿
  模型的开发,目前在互金领域场景中因为变量多,开发周期短,目前用得最多的就是XGB、LGB这类的机器学习模型。
  比如我们之前跟大家输出的关于个人信贷反欺诈评分卡的开发内容里,我们用的就是lightgbm来建模的,相关的操作细节如下:
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  关于这一类机器学习模型,虽然说有黑箱的内容在里面,但常规上我们还是可以用特征重要性,也就是featureimportance来查看特征对模型重要度的贡献:
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  【图:绘制lgb模型的特征重要性的排序图】
  关于模型特征可解释性的的内容,除了如以上提供的模型都有importance这一接口外,目前常用的还有SHAP这一个模型可解释性的内容,今天我们跟大家讲讲这个内容,而且还会实操一个只能用SHAP来演绎模型特征重要性的算法。
  一。SHAP介绍
  可解释机器学习在这几年慢慢成为了机器学习的重要研究方向。作为数据科学家需要防止模型存在偏见,且帮助决策者理解如何正确地使用我们的模型。越是严苛的场景,越需要模型提供证明它们是如何运作且避免错误的证据
  关于模型解释性,除了线性模型和决策树这种天生就有很好解释性的模型意外,sklean中有很多模型都有importance这一接口,可以查看特征的重要性。如这里提到的特征重要性的内容:
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  关于特征的重要性,比如上面我们用xgboost这种集成模型时是用featureimportance方法的。那对于某些算法,比如异常检测中的孤立森林算法,只能用shapvalue来表达。
  二。如何实现SHAP
  实现SHAP,可以直接调用SHAP模块就能实现。本次在实操过程中,我们用之前跟大家介绍过的孤立森林这个算法,来特别实现,因为孤立森林接口直接调不出featureimportance的。
  如上所述,shap是Python开发的一个模型解释包,可以解释任何机器学习模型的输出。其名称来源于SHapleyAdditiveexPlanation,在合作博弈论的启发下shap构建一个加性的解释模型,所有的特征都视为贡献者。对于每个预测样本,模型都产生一个预测值,shapvalue就是该样本中每个特征所分配到的数值。
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  Python中shap值的计算由shap这个package实现,下面我们对训练出的baseiforest模型,计算其shap值。先引用package并且获得解释器explainer,再获取各个样本的shap值,然后调用summaryplot绘制重要性排序图,可以看到绘制出的图表类似xgboost的featureimportance图,shapvalue可理解为一个特征对目标变量影响程度的绝对值的均值作为这个特征的重要性。
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  关于本文所提及的机器学习模型相关的数据集跟代码实操内容,可以同步至知识星球后台,查看完整版本内容,欢迎星球同学移步到知识星球查收完整内容:
  编辑切换为居中
  添加图片注释,不超过140字(可选)
  。。。
  原创文章
搜索 投诉 评论 转载

陕西延安民宿激活乡村旅游大文章在陕北,窑洞是家,更是游子心中一抹乡愁。圣地延安、红色延安、绿色延安,始终令人向往。延安的窑洞在时代变迁中也焕发出新的光彩。从2017年开始,因窑洞冬暖夏凉的独特魅……油价调整消息今天9月17号,各地92汽油95汽油零售限价今天是2022年9月17日,本次油价调整计价周期进入了尾声,在下周三晚间,油价调整窗口将会正式开启,好消息是本轮油价调整大概率将会下调,各位车主要做好迎接油价下跌的准备!……近15亿资产只卖1块钱,交易所问讯合理吗?腾讯游戏元旦期间未数据是个宝数据宝炒股少烦恼中国汽车工业协会正式发布《电动乘用车共享换电站建设规范》系列团体标准。腾讯游戏:元旦假期未成年人游戏限玩1小时日腾讯游戏……LCK和LPL各位置选手排名Faker中单倒数LCK和LPL夏季赛常规赛已经接近尾声,网友自己制作了一份LPL和LCK赛区各个位置选手的排行图,而让人惊讶的是Faker已经被排到中单的垫底位置了。首先是上单位置,制作……当你又忙又美,何惧患得患失最近读了一本书,读完让人很想立刻改变自己。这本书叫《当你又忙又美,何惧患得患失》,作者梁爽。这本书读起来很轻松,吸收起来也很快,适合所有想要改变现状的姐妹们看。……高级别的重要会议,释放了哪些重要信号,定调了哪些重大事件?这是熊猫贝贝的第1208篇原创文章:7月28日,中共中央召开政治局会议,分析研究当前经济形势。中国的政治局每年分别会在4月、7月、10月、12月召开重要会议,分析当……没体验过千座峰丛的傍晚与清晨,或许不算到过连南千年瑶寨身边有不少朋友说,连南千年瑶寨没什么好玩。但不久前,广州美女小芸在千年瑶寨住过一晚后却赞不绝口,她这次度假特别治愈,心情变得好多了。小芸说,如果你没有在瑶寨住上一晚,根本……风控模型黑箱可解释,试下这个方法来演示模型的开发,目前在互金领域场景中因为变量多,开发周期短,目前用得最多的就是XGB、LGB这类的机器学习模型。比如我们之前跟大家输出的关于个人信贷反欺诈评分卡的开发内容里,……要想手机可以用五年不换,建议一步到位,目前这三款手机满足需求要想手机可以用五年不换,建议一步到位,目前这三款手机满足需求第一款:iPhone13iPhone目前最新款手机,搭载A15处理器,在安卓手机芯片集体摆烂的情况下,A15强……第六百七十一章异侧同出得不同方向的先手头条创作挑战赛第六百七十一章异侧同出得不同方向的先手开局有先走后走,列手炮原本目的是克制红方先走急进车,但是本身也开辟了异侧同出的先例!即红方走左边大子黑方也走左边大子这……日联杯东京FCVS湘南海洋,赛程得到缓解,东京迎来杯赛反击机杯赛一直以来都不太受大家喜欢。主要原因还是在欧洲联赛的杯赛,很多时候强队都没有太大的战意。他们更倾向于轮换来准备联赛,或者是欧冠、欧联杯上。噢,对了,欧联杯也要剔除,不少球队在……说话的力量德谟克利特说要使人信服,一句语言常常比黄金更有效好好说话,是一个人最基本的教养海涅曾说语言之力,大到可以从坟墓里唤醒死人可以把生者活埋把侏儒……
5000mAh60W8GB,降至1089元!6nm芯片千元机林心如逛超市被偶遇,穿风衣配露脐装高级又甜辣,哪像46岁孩子麦科勒姆输球没有借口我们全队都必须打得更好才行约翰逊完成右膝半月板部分切除手术,预计缺阵12个月第四次穿越北纬40度,UNIKiDD伴我随心所行50岁之后,建议女人少穿运动鞋,秋季多穿这3双更时髦减龄抖音回应上线外卖功能已开放部分团购商品配送服务人生说到底,就是一场匹配游戏Mate50系列今日开售,准备好了吗?王者荣耀最冷门的位置是辅助,最超标的也是辅助,辅助有何魔力无缘同你相濡以沫共此生,就在心里深深念你到永恒盘点刀过角色形象或名称的游戏,原神刚中枪!有你在玩的吗?
地震云有哪些种类?地震云一定会地震吗?夏末秋初,养肺要趁早,中医专家教你三招防秋燥美国数十个大城市的宽带速度下降俄罗斯体坛遭全面禁赛!乌克兰足协厚颜无耻,激怒中国网友表格入门基础教程简单制作数据表格婞諨是樶短暫啲東硒凤尾鱼尾巴开叉烂是怎么了,如何治疗波动的本质戴望舒简介资料戴望舒喜欢过的女人都有谁不学好财商再节俭也是白搭黑色貂皮发红怎么回事黑色貂皮发红的原因老人冬季背部也需要保暖

友情链接:中准网聚热点快百科快传网快生活快软网快好知文好找江西南阳嘉兴昆明铜陵滨州广东西昌常德梅州兰州阳江运城金华广西萍乡大理重庆诸暨泉州安庆南充武汉辽宁