Dasar-Dasar Reduksi Dimensi

Reduksi dimensi adalah proses mengurangi jumlah variabel masukan (fitur) dalam kumpulan data sambil mempertahankan informasi penting. Proses ini membantu menyederhanakan data dan meningkatkan efisiensi komputasi.

Mengapa Reduksi Dimensi Penting

Kumpulan data berdimensi tinggi dapat menyebabkan:

• Pemasangan Berlebih: Model dapat menangkap derau, bukan pola.
• Kompleksitas yang Meningkat: Membutuhkan banyak sumber daya komputasi untuk diproses.
• Tantangan Visualisasi: Data dengan banyak dimensi sulit diinterpretasikan.

Metode Reduksi Dimensi

Ada dua pendekatan utama:

• Pemilihan Fitur: Memilih fitur yang paling penting, misalnya menggunakan korelasi atau skor kepentingan.
• Ekstraksi Fitur: Membuat fitur baru dengan menggabungkan fitur yang sudah ada, misalnya Analisis Komponen Utama.

Analisis Komponen Utama (PCA)

PCA adalah teknik reduksi dimensi yang populer. Teknik ini mengubah data menjadi sekumpulan fitur ortogonal baru yang disebut komponen utama, yang memaksimalkan varians.

PCA banyak digunakan untuk mengurangi derau, visualisasi, dan ekstraksi fitur.

Penyematan Tetangga Stokastik Berdistribusi-t (t-SNE)

t-SNE adalah metode reduksi dimensi lain yang berfokus pada visualisasi. Metode ini memetakan data berdimensi tinggi ke dalam ruang 2D atau 3D sambil mempertahankan struktur titik data.

t-SNE sangat efektif untuk memahami klaster dalam kumpulan data yang kompleks.

Membandingkan PCA dan t-SNE

PCA:

• Berfokus pada pemertahanan varians.
• Berguna untuk mengurangi derau dan mengekstraksi fitur.

t-SNE:

• Berfokus pada pemertahanan struktur untuk visualisasi.
• Membutuhkan komputasi yang lebih intensif daripada PCA.

Tantangan dalam Reduksi Dimensi

Tantangan yang umum meliputi:

• Hilangnya keterinterpretasian ketika fitur diubah.
• Menentukan jumlah komponen yang optimal.
• Biaya komputasi untuk kumpulan data berukuran besar.

Penerapan Reduksi Dimensi

Reduksi dimensi banyak digunakan dalam:

• Pemrosesan Gambar: Mengurangi dimensi gambar untuk kompresi.
• Analisis Teks: Menyederhanakan data teks berdimensi tinggi.
• Visualisasi Data: Memetakan data berdimensi tinggi ke dalam ruang 2D atau 3D.

Ringkasan dan Langkah Berikutnya

Dalam pelajaran ini, kita membahas:

• Dasar-dasar reduksi dimensi.
• Teknik-teknik utama: PCA dan t-SNE.
• Tantangan dan penerapan reduksi dimensi.

Selanjutnya, kita akan menerapkan PCA pada kumpulan data di Python untuk memahami cara kerjanya.