变量选择方法(工具变量的选择必须满足的条件)

就是选择X

可能模型的入参有很多X,那么如何选择这些X?


WOE weight of evidence 证据权重。

选择变量的方法--WOE和IV;顺便引入odds的概念

这里就顺道说下odds ratio (OR值)的概念:odds 优势比。

比如下雨的概率为0.25,不下雨的概率为0.75。0.25与0.75的比值可以约分为1比3。因此,我们可以说今天将会下雨的优势比为1:3(或者今天不会下雨的概率比为3:1)

若是风控模型,病例组就是正样本,对照组就是好样本。

WOE=ln(BI/BT / GI/GT)*100%=ln(p1/p0)= ln(BI/GI / BT/GT)=ln(oddsi / oddsT)

p1和p0分别表示了违约样本与正常样本占各自总体的比例;

可以认为WOE衡量了自变量取Ai时的违约险算比(oddsratio)与总体违约险算比之间的某种差异。正因为如此,直观地可以认为WOE蕴含了自变量取值对目标变量(违约概率)的某种影响,因此可以自然地将自变量重新编码:当自变量取值Ai时,编码为相应的WOEi。

选择变量的方法--WOE和IV;顺便引入odds的概念

IV information value 信息值。

IV=sum((p1-p0)*log(p1/p0)) 。

选择变量的方法--WOE和IV;顺便引入odds的概念

IV值可以用于衡量各变量对y的预测能力,用于筛选变量。

对离散型的变量,如 一线城市、二线城市;博士、硕士等学历变量。woe可以观察各个level间的跳转对odds的提升是否是线性的。而IV值可以衡量变量整体的预测能力。

对连续变量而言,可以通过将连续变量进行分箱的合理,可能是等距分箱,可能是等频分箱,一般选后者。此时WOE和IV拥有和 离散型变量同样的意义。

(0)
小多多的头像小多多创始人

相关推荐

发表回复

登录后才能评论