Final Lab, Evaluasi Proyek & Integrasi Sistem
Panduan menyelesaikan proyek akhir — pipeline end-to-end yang reproducible, validasi silang, interpretasi model, struktur repositori, template laporan, dan rubrik penilaian.
- 01Pilihan ganda
Manakah yang merupakan contoh data leakage?
- 02Pilihan ganda
Fungsi
ColumnTransformerdalam pipeline adalah … - 03Pilihan ganda
Mengapa
OneHotEncoder(handle_unknown="ignore")disarankan? - 04Pilihan ganda
Data uji (hold-out) sebaiknya digunakan …
- 05Pilihan ganda
Permutation importance mengukur pentingnya fitur dengan cara …
- 06Pilihan ganda
Mengapa perlu model baseline dalam proyek?
- 07Hitung
Skor F1 lima fold: 0.70, 0.74, 0.72, 0.76, 0.73. Berapa rata-ratanya?
- 08Hitung
Dataset churn 1500 baris, 25% churn. Dengan
test_size=0.25berstrata, berapa jumlah pelanggan churn di data uji? - 09Hitung
Kolom numerik 4 buah; kolom
kontrakpunya 3 kategori danmetode_bayar3 kategori. Berapa jumlah kolom setelah ColumnTransformer (scaling + one-hot)? - 10Hitung
F1 model pada data uji = 0.72. Setelah kolom
kontrakdiacak, F1 turun menjadi 0.55. Berapa permutation importancekontrak? - 11Uraian
Sebutkan minimal 5 item checklist reproducibility untuk repositori proyek akhir dan jelaskan mengapa masing-masing penting.
- 12Uraian
Studi kasus. Model churn kelompokmu mendapat F1 = 0.98 pada data uji, jauh di atas kelompok lain (≈ 0.72). Apa yang kamu curigai dan bagaimana memeriksanya?