Membaca Angka secara Jujur

Angka speedup tidak banyak berarti jika berdiri sendiri. Membacanya secara jujur berarti mengetahui apa yang diukur dan dari mana peningkatan itu benar-benar berasal. 🔍

Speedup adalah waktu lama dibagi waktu baru. Jika Python membutuhkan 4 detik dan Mojo membutuhkan 1 detik, berarti speedup-nya 4 kali lipat.

Pada tugas kecil, gangguan saat startup mendominasi dan rasio dapat berubah-ubah secara ekstrem. Speedup besar pada pekerjaan sepele biasanya tidak membuktikan apa pun.

Jika versi Mojo Anda melewati pekerjaan yang dikerjakan versi Python, kesenjangannya palsu. Angka yang jujur berasal dari kode yang benar-benar setara.

Perhatikan seberapa besar waktu bervariasi di antara beberapa eksekusi. Jika hasilnya banyak berubah, satu nilai rata-rata mungkin menyembunyikan ketidakstabilan yang nyata.

Laporkan median atau rata-rata dari banyak eksekusi, bukan eksekusi terbaik yang kebetulan beruntung. Memilih waktu tercepat akan membesar-besarkan hasil.

CPython murni memang lambat, tetapi NumPy sudah menggunakan C yang cepat. Bandingkan dengan baseline yang adil, atau speedup Anda mungkin jauh lebih kecil.

Algoritma yang lebih baik dapat mengalahkan bahasa apa pun. Pastikan peningkatan itu berasal dari Mojo, bukan dari diam-diam mengganti logika dengan logika yang lebih cerdas.

Selalu catat CPU, ukuran input, dan jumlah eksekusi. Speedup tanpa kondisi tersebut tidak dapat dipercaya atau direproduksi oleh orang lain.

Katakan 8 kali lipat pada tugas dan mesin ini, bukan sangat cepat di mana-mana. Klaim yang jujur bersifat spesifik dan tetap dekat dengan data.

Jika seseorang dapat menjalankan ulang tes Anda dan melihat waktu yang serupa, hasil Anda memperoleh kepercayaan. Reprodusibilitas adalah bukti sebenarnya dari suatu benchmark.

Baca speedup secara jujur: pilih baseline yang adil, rata-ratakan banyak eksekusi, nyatakan kondisinya, dan hindari bualan. Angka yang dapat direproduksi membangun kepercayaan nyata. 🎯