Anvendelse av dimensjonsreduksjon

I denne leksjonen bruker vi hovedkomponentanalyse (PCA) til å redusere antallet dimensjoner i et datasett. Dette gjør datasettet enklere, samtidig som viktig informasjon bevares.

Vi bruker Iris-datasettet, som inneholder målinger av blomsterarter:

• Egenskaper: Begerbladlengde, begerbladbredde, kronbladlengde og kronbladbredde.
• Målvariabel: Art (Setosa, Versicolor, Virginica).

Vi starter med å importere de nødvendige bibliotekene og laste inn datasettet:

import pandas as pd
from sklearn.datasets import load_iris

# Load Iris dataset
data = load_iris()
X = pd.DataFrame(data.data, columns=data.feature_names)
y = data.target
print(X.head())

PCA er følsom for dataskalaen, så vi standardiserer dataene ved hjelp av StandardScaler:

from sklearn.preprocessing import StandardScaler

# Standardize the data
scaler = StandardScaler()
X_scaled = scaler.fit_transform(X)

Vi bruker PCA til å redusere datasettet til to hovedkomponenter:

from sklearn.decomposition import PCA

# Apply PCA
pca = PCA(n_components=2)
X_pca = pca.fit_transform(X_scaled)
print(f"Explained Variance Ratio: {pca.explained_variance_ratio_}")

Vi kan visualisere det transformerte datasettet i et todimensjonalt rom for å se hvordan artene grupperes:

import matplotlib.pyplot as plt

# Scatter plot of PCA results
plt.scatter(X_pca[:, 0], X_pca[:, 1], c=y, cmap='viridis')
plt.xlabel('Principal Component 1')
plt.ylabel('Principal Component 2')
plt.title('PCA Results')
plt.colorbar(label='Species')
plt.show()

PCA-plottet viser hvordan dataene er fordelt i de reduserte dimensjonene. Punkter fra samme art har en tendens til å gruppere seg sammen, noe som tyder på effektiv klynging.

PCA har flere fordeler:

• Reduserer antallet dimensjoner i dataene, slik at de blir enklere å visualisere.
• Fjerner støy og overflødige egenskaper.
• Forbedrer beregningseffektiviteten for store datasett.

Noen begrensninger ved PCA er:

• Tap av tolkbarhet for transformerte egenskaper.
• Følsomhet for skaleringen av egenskapene.
• Kan hende ikke fange opp komplekse, ikke-lineære sammenhenger i dataene.

I denne leksjonen har vi:

• Brukt PCA på Iris-datasettet for dimensjonsreduksjon.
• Visualisert resultatene og sett klynging av arter i et todimensjonalt rom.
• Diskutert fordelene og utfordringene ved PCA.

Deretter utforsker vi avanserte konsepter innen dyp læring, med kunstige nevrale nettverk som utgangspunkt.