Pelaksanaan Regresi Logistik

Langkah 2: Mencipta Model Regresi Logistik

Kita menggunakan kelas LogisticRegression daripada scikit-learn untuk mencipta dan melatih model.

model = LogisticRegression()
model.fit(X_train, y_train)

Setelah model dilatih, kita menggunakannya untuk membuat ramalan berdasarkan data ujian.

y_pred = model.predict(X_test)

Langkah 4: Menilai Model

Kita menilai prestasi model menggunakan ketepatan sebagai metrik.

accuracy = accuracy_score(y_test, y_pred)
print(f"Model Accuracy: {accuracy:.2f}")

Langkah 5: Memvisualisasikan Sempadan Keputusan

Untuk memahami prestasi model dengan lebih baik, kita memvisualisasikan sempadan keputusan.

import matplotlib.pyplot as plt
import numpy as np

# Define grid for plotting
def plot_decision_boundary(X, y, model):
    x_min, x_max = X[:, 0].min() - 1, X[:, 0].max() + 1
    y_min, y_max = X[:, 1].min() - 1, X[:, 1].max() + 1
    xx, yy = np.meshgrid(np.arange(x_min, x_max, 0.1), np.arange(y_min, y_max, 0.1))

    Z = model.predict(np.c_[xx.ravel(), yy.ravel()])
    Z = Z.reshape(xx.shape)
    
    plt.contourf(xx, yy, Z, alpha=0.8)
    plt.scatter(X[:, 0], X[:, 1], c=y, edgecolor='k')
    plt.title('Decision Boundary')
    plt.show()

plot_decision_boundary(X, y, model)

Langkah 6: Menala Model

Kita boleh meningkatkan prestasi model dengan melaraskan hiperparameter seperti C, yang mengawal kekuatan regularisasi.

model = LogisticRegression(C=0.5)
model.fit(X_train, y_train)

Cabaran termasuk:

• Mengendalikan set data yang tidak seimbang.
• Menangani ciri yang sangat berkorelasi.
• Memastikan data latihan yang mencukupi untuk menghasilkan ramalan yang berkesan.

Dalam pelajaran ini, kita telah:

• Melaksanakan regresi logistik menggunakan scikit-learn.
• Membuat ramalan dan menilai model.
• Memvisualisasikan sempadan keputusan.

Seterusnya, kita akan meneroka cara menilai prestasi model menggunakan metrik seperti skor F1, kejituan dan kadar dapatan semula.