Python基于逻辑回归分类模型、决策树分类模型、LightGBM分类模型和XGBoost分类模型实现车辆贷款违约预测项目实战

说明：这是一个机器学习实战项目（附带数据+代码+文档+视频讲解），如需数据+代码+文档+视频讲解可以直接到文章最后获取。

1.项目背景

随着经济的发展和人民生活水平的提高，汽车消费在居民消费中所占比例逐渐增加，汽车金融公司也因此得到了快速发展。然而，在这个过程中，车贷违约风险的问题也逐渐凸显。如何有效识别和预测车贷违约风险，成为汽车金融公司急需解决的问题。

金融机构因车辆贷款违约而蒙受重大损失。这导致汽车贷款承保收紧，汽车贷款拒绝率上升。通过分析汽车贷款违约情况，利用多种机器学习模型进行预测。

本项目通过逻辑回归模型、决策树模型、LightGBM模型和XGBoost模型进行车辆贷款违约预测。      

2.数据获取

本次建模数据来源于网络(本项目撰写人整理而成)，数据项统计如下：

数据详情如下(部分展示)：

3.数据预处理

3.1 用Pandas工具查看数据

使用Pandas工具的head()方法查看前五行数据： 

关键代码：

3.2数据缺失查看

使用Pandas工具的info()方法查看数据信息：

从上图可以看到，总共有41个变量，数据中无缺失值，共233154条数据。

关键代码： 

3.3数据描述性统计

通过Pandas工具的describe()方法来查看数据的平均值、标准差、最小值、分位数、最大值。

关键代码如下：  

4.探索性数据分析

4.1 loan_default变量柱状图

用Matplotlib工具的plot()方法绘制柱状图：

4.2 数据项空值统计

从上图可以看到，Employment_Type变量有空值，数量为7661。

4.3 相关性分析

从上图中可以看到，对部分特征进行了相关性分析，数值越大相关性越强，正值是正相关、负值是负相关。

4.4 绘制直方图

用Matplotlib工具的hist()方法绘制直方图：

从上图可以看出，对部分特征进行直方图绘制。

4.5 绘制折线图

如下是两个变量和因变量的折线图：

4.6 绘制柱状图

4.7 绘制散点图

5.特征工程

5.1 建立特征数据和标签数据

关键代码如下：

5.2 数据均衡化

如下所示，为数据均衡化后的数据：

5.3 数据标准化

数据标准化关键代码如下：

5.4 数据集拆分

通过train_test_split()方法按照90%训练集、10%测试集进行划分，关键代码如下：

6.构建分类模型 

主要使用逻辑回归分类算法、决策树分类算法、LightGBM分类算法和XGBoost分类算法，用于目标分类。  

6.1 构建模型 

7.模型评估

7.1评估指标及结果 

评估指标主要包括准确率、查准率、查全率、F1分值等等。

从上表可以看出，LightGBM分类模型和XGBoost分类模型 F1分值分别为0.8244和0.827，说明这2个模型效果较好。   

7.2 分类报告

逻辑回归分类模型：

从上图可以看出，分类为0的F1分值为0.66；分类为1的F1分值为0.67。

决策树分类模型：

从上图可以看出，分类为0的F1分值为0.77；分类为1的F1分值为0.77。

LightGBM分类模型：

从上图可以看出，分类为0的F1分值为0.87；分类为1的F1分值为0.82。

XGBoost分类模型：

从上图可以看出，分类为0的F1分值为0.87；分类为1的F1分值为0.83。

7.3 混淆矩阵

逻辑回归分类模型：

从上图可以看出，实际为0预测不为0的 有6327个样本；实际为1预测不为1的 有5971个样本。  

决策树分类模型：

从上图可以看出，实际为0预测不为0的 有4395个样本；实际为1预测不为1的 有4027个样本。  

LightGBM分类模型：

从上图可以看出，实际为0预测不为0的 有101个样本；实际为1预测不为1的 有5375个样本。

XGBoost分类模型：

从上图可以看出，实际为0预测不为0的 有146个样本；实际为1预测不为1的 有5271个样本。

7.4 ROC曲线

逻辑回归分类模型：

从上图可以看出，逻辑回归分类模型的AUC值为0.73。

决策树分类模型：

从上图可以看出，决策树分类模型的AUC值为0.77。

LightGBM分类模型：

从上图可以看出，LightGBM分类模型的AUC值为0.89。

XGBoost分类模型：

从上图可以看出，XGBoost分类模型的AUC值为0.89。

8.结论与展望

综上所述，本文采用了逻辑回归、决策树、LightGBM和XGBoost算法来构建分类模型，最终证明了LightGBM和XGBoost模型效果良好。此模型可用于日常产品的预测。 

# 本次机器学习项目实战所需的资料，项目资源如下：
 
# 项目说明：
 
# 获取方式一：
 
# 项目实战合集导航：
 
https://docs.qq.com/sheet/DTVd0Y2NNQUlWcmd6?tab=BB08J2
 
# 获取方式二：
 
链接：https://pan.baidu.com/s/1SKKxNs2aWQyqe5Yrvp-gdw 
提取码：tlvp