风控模型实验报告

实验 ID: 20260907-155141-b067 · 生成时间: 2026-09-07 07:51 UTC

1. 数据审计

样本数1000
字段数24
坏样本率11.10%
高风险字段5

审计建议

  • 列 `customer_id` 唯一率过高(0.999),可能是 ID 列,应排除在特征之外
  • 列 `apply_time` 唯一率过高(1.0),可能是 ID 列,应排除在特征之外
  • 列 `income` 唯一率过高(0.999),可能是 ID 列,应排除在特征之外
  • 列 `loan_amount` 唯一率过高(0.998),可能是 ID 列,应排除在特征之外
  • ID 列 `customer_id` 有 1 个重复值

2. 样本拆分

拆分方式: 时间切分,总样本 1000,目标非空 1000

数据集样本数比例坏样本率时间范围
训练集60060.00%11.67%2024-01-01 ~ 2024-01-25
验证集20020.00%9.00%2024-01-26 ~ 2024-02-03
OOT 集20020.00%11.50%2024-02-03 ~ 2024-02-11

3. 变量筛选

候选变量 21,入模 8,IV 阈值 0.01

变量IV单调分箱数
credit_score0.19024
employment_years0.04422
debt_ratio0.02782
region0.01777
historical_overdue_count0.01762
time_on_page_sec0.01622
app_sessions_30d0.01352
education0.01204

4. 模型评估

模型数据集AUCKSLift@10%PSI
LightGBM训练集0.99980.99258.57
LightGBM验证集0.64590.30461.67
LightGBMOOT 集0.59790.21941.740.3581

LightGBM — 训练集 坏样本率分档

分组样本数坏样本坏样本率分数范围
16000.00%0.00 ~ 0.01
26000.00%0.01 ~ 0.01
36000.00%0.01 ~ 0.02
46000.00%0.02 ~ 0.03
56000.00%0.03 ~ 0.04
66000.00%0.04 ~ 0.05
76000.00%0.05 ~ 0.08
86000.00%0.08 ~ 0.15
9601016.67%0.15 ~ 0.46
106060100.00%0.47 ~ 0.87

LightGBM — 验证集 坏样本率分档

分组样本数坏样本坏样本率分数范围
12015.00%0.00 ~ 0.00
22015.00%0.00 ~ 0.01
32015.00%0.01 ~ 0.02
42015.00%0.02 ~ 0.03
52015.00%0.03 ~ 0.04
620315.00%0.05 ~ 0.06
720210.00%0.06 ~ 0.12
82000.00%0.13 ~ 0.19
920525.00%0.20 ~ 0.32
1020315.00%0.35 ~ 0.73

LightGBM — OOT 集 坏样本率分档

分组样本数坏样本坏样本率分数范围
12015.00%0.00 ~ 0.00
220315.00%0.00 ~ 0.01
32000.00%0.01 ~ 0.02
420210.00%0.02 ~ 0.03
520210.00%0.03 ~ 0.05
620420.00%0.06 ~ 0.07
720210.00%0.07 ~ 0.10
820315.00%0.10 ~ 0.15
920210.00%0.15 ~ 0.25
1020420.00%0.25 ~ 0.69

特征重要性 — LightGBM

变量重要性
credit_score538
time_on_page_sec479
employment_years419
debt_ratio389
app_sessions_30d178
historical_overdue_count105
region78
education22