混淆矩阵显示错误信息？

Question

更新：附上数据的链接，以防您想重现：

https://github.com/amandawang-dev/credit-worthiness-analysis/blob/master/credit_train.csv

https://github.com/amandawang-dev/credit-worthiness-analysis/blob/master/credit_test.csv

我正在尝试使用 sklearn 的逻辑回归 model 来预测该人的银行帐户信用是好还是坏。 初始数据集如下所示：

---

然后我将第一列“Class”（'Good'=1，'Bad'=0）二值化，数据集如下所示：

所以我使用sklearnlogistic model来预测测试数据（测试数据与预测数据集相同，'Class'列也被二值化），并尝试计算混淆矩阵，代码如下，那么我得到的混淆矩阵是

[[  0  54]
 [  0 138]]

准确度得分为 0.71875，我认为混淆矩阵结果是错误的，因为没有真正的正值。 有人知道如何解决这个问题吗？ 谢谢！

from sklearn.linear_model import LogisticRegression
import numpy as np
import pandas as pd

credit_train = pd.read_csv('credit_train.csv')
credit_test = pd.read_csv('credit_test.csv')
credit_train["Class"] = (credit_train["Class"] =="Good").astype(int)
credit_test["Class"] = (credit_test["Class"] =="Good").astype(int)
X=credit_train[['CreditHistory.Critical']]
y=credit_train['Class']
clf = LogisticRegression(random_state=0).fit(X, y)

X_test=credit_test[['CreditHistory.Critical']]
y_test=credit_test['Class']
y_pred=clf.predict(X_test)

from sklearn.metrics import confusion_matrix

cm=confusion_matrix(y_pred=y_pred, y_true=y_test)
score = clf.score(X_test, y_test)
print(score)
print(cm)

---

每列的数据类型：

<class 'pandas.core.frame.DataFrame'>
RangeIndex: 808 entries, 0 to 807
Data columns (total 17 columns):
Class                             808 non-null int64
Duration                          808 non-null int64
Amount                            808 non-null int64
InstallmentRatePercentage         808 non-null int64
ResidenceDuration                 808 non-null int64
Age                               808 non-null int64
NumberExistingCredits             808 non-null int64
NumberPeopleMaintenance           808 non-null int64
Telephone                         808 non-null int64
ForeignWorker                     808 non-null int64
CheckingAccountStatus.lt.0        808 non-null int64
CheckingAccountStatus.0.to.200    808 non-null int64
CheckingAccountStatus.gt.200      808 non-null int64
CreditHistory.ThisBank.AllPaid    808 non-null int64
CreditHistory.PaidDuly            808 non-null int64
CreditHistory.Delay               808 non-null int64
CreditHistory.Critical            808 non-null int64
dtypes: int64(17)
memory usage: 107.4 KB

Answer 1

首先，您的课程略有不平衡，大约 71% 为 1：

credit_test["Class"].value_counts()

1    138
0     54

当您运行逻辑回归时，它会估计平均值，即为 1 的对数几率，然后是与因变量相关的对数几率。 如果您查看系数：

[clf.intercept_,clf.coef_]
[array([0.59140229]), array([[0.9820343]])]

截距似乎是正确的，这意味着平均值约为 exp(0.59140229)/(1+exp(0.59140229)) = 0.643。 你的自变量 CreditHistory.Critical 只能是 0 或 1，你的系数在那里是 0.9820343，结果总是 p > 0.5，这意味着所有标签 1。

可以不带截距拟合 model，现在看预测没有偏差，但基本不是很准确：

clf = LogisticRegression(random_state=0,fit_intercept=False).fit(X, y)
y_pred=clf.predict(credit_test[['CreditHistory.Critical']])
confusion_matrix(y_pred=y_pred, y_true=y_test)

array([[42, 12],
       [84, 54]])

您可以尝试将 model 与其他一些变量拟合以获取信息，它应该会给您更好的结果。