Keruntuhan Mode dan Trik Stabilisasi
Diagnosis dan perbaiki pelatihan GAN yang tidak stabil
Keruntuhan Mode dan Trik Stabilisasi adalah pelajaran Deep Learning Academy gratis di CoddyKit. Ini adalah pelajaran 4 dari 4. Kamu bisa membaca pelajaran lengkapnya di bawah secara gratis — lalu praktikkan langsung di browser dengan editor kode bawaan dan tutor AI 24/7. Ini adalah bagian dari jalur belajar Deep Learning Academy, dan progresmu tersinkronisasi di web dan aplikasi CoddyKit. Kursus Deep Learning Academy mencakup 4 pelajaran total.
Bagian dari pelajaran ini belum diterjemahkan dan ditampilkan dalam bahasa Inggris.
GANs Are Hard to Train
GANs are powerful but notoriously fragile. Two networks chasing each other can swing, stall, or collapse. Knowing the failure modes saves you hours. 🧯
What Is Mode Collapse
Mode collapse happens when the generator produces only a few outputs that reliably fool the judge, ignoring the full variety of the real data.
Spotting the Collapse
You spot it when generated samples all look nearly identical, even though your real dataset is rich and diverse. Variety has vanished.
When the Judge Wins Too Fast
If the discriminator gets too strong too quickly, its gradients dry up and the generator stops learning. Balance between the two is everything.
Trick: Label Smoothing
Label smoothing softens the real target from 1.0 to about 0.9. This keeps the discriminator humble and its gradients useful.
real_label = 0.9Trick: Add Input Noise
Adding a little noise to the discriminator's inputs makes its job slightly harder, which steadies the training game and reduces collapse.
noisy = real + 0.05 * torch.randn_like(real)Trick: Tune the Optimizer
The DCGAN paper uses Adam with a low learning rate and beta1 set to 0.5. These settings are a reliable starting point.
Adam(params, lr=2e-4, betas=(0.5, 0.999))Trick: Minibatch Diversity
Minibatch features let the discriminator compare samples within a batch. If they all look the same, it notices, punishing collapse directly.
Trick: Wasserstein Loss
The Wasserstein loss with gradient penalty gives smoother signals than plain cross-entropy, making notoriously unstable GANs far easier to train.
Keep the Two Balanced
Aim for a fair fight. If one network dominates, slow it down or update the other more often. Balance beats any single trick.
Judge by Diversity Too
A healthy GAN makes images that are both sharp and varied. Always check that different latent vectors give genuinely different outputs.
Quick Check
Recognizing the symptom is half the cure.
Recap: Stabilizing GANs
You learned to spot mode collapse and to fight it with label smoothing, input noise, tuned Adam, and a balanced generator-discriminator duo. 💪
Pertanyaan yang Sering Diajukan
Apakah pelajaran “Keruntuhan Mode dan Trik Stabilisasi” gratis?
Ya — teks lengkap “Keruntuhan Mode dan Trik Stabilisasi” gratis dibaca di sini di web. Untuk praktiknya secara interaktif (editor kode bawaan dan tutor AI 24/7) dan buka sisa kursus Deep Learning Academy, upgrade ke CoddyKit PRO. Kursus Deep Learning Academy mencakup 4 pelajaran total.
Apa yang akan aku pelajari di “Keruntuhan Mode dan Trik Stabilisasi”?
Diagnosis dan perbaiki pelatihan GAN yang tidak stabil Kamu berlatih Deep Learning Academy dengan kode praktik yang langsung kamu jalankan di browser, dan tutor AI 24/7 menjawab pertanyaanmu saat kamu mengerjakan pelajaran ini.
Apakah aku perlu pengalaman untuk memulai Deep Learning Academy?
Tidak diperlukan pengalaman sebelumnya. Deep Learning Academy di CoddyKit dirancang untuk pemula hingga pelajar tingkat lanjut, jadi kamu bisa memulai di sini atau dari awal dan belajar sesuai kecepatan kamu sendiri. Ini adalah pelajaran 4 dari 4.
Berapa lama pelajaran “Keruntuhan Mode dan Trik Stabilisasi” memakan waktu?
Sebagian besar pelajaran CoddyKit memakan waktu sekitar 5–10 menit. Setiap pelajaran ringkas dan interaktif, jadi kamu membuat kemajuan stabil dan melanjutkan dari tempat kamu tinggalkan di web dan aplikasi.
Bisakah aku menulis dan menjalankan kode dalam pelajaran Deep Learning Academy ini?
Ya. Setiap pelajaran Deep Learning Academy menyertakan editor kode bawaan, jadi kamu menulis dan menjalankan kode nyata langsung di browser dan mendapatkan umpan balik AI instan — tidak diperlukan penyiapan lokal.
Semua pelajaran dalam kursus ini
- Generator vs Discriminator: Permainannya
- Loss Adversarial
- Bangun DCGAN
- Keruntuhan Mode dan Trik Stabilisasi