Perpustakaan Digital ITB

Tes esai merupakan salah satu bentuk asesmen yang mampu mengukur kemampuan berpikir kompleks siswa, seperti kebebasan mengembangkan jawaban, menyusun argumen, dan mengintegrasikan gagasan. Namun, penilaian esai memiliki kelemahan mendasar karena membutuhkan waktu koreksi yang panjang dan rentan terhadap subjektivitas antar-penilai sehingga menghasilkan skor yang tidak konsisten. Oleh karena itu, diperlukan sistem penilaian jawaban esai otomatis yang mampu membantu proses evaluasi agar lebih cepat, efisien, dan objektif. Sebagian besar penelitian pada topik penilaian jawaban esai otomatis berfokus pada peningkatan akurasi skor untuk mendekati hasil penilaian manual manusia. Dalam konteks tersebut, pendekatan berbasis transformer dapat dimanfaatkan untuk memperoleh representasi semantik yang lebih baik dibandingkan word embedding konvensional karena mampu menangkap relasi makna lintas kata, frasa, dan kalimat. Selain menghasilkan skor otomatis, penelitian ini juga mengintegrasikan analisis kesalahan berbasis GenAI untuk mendeteksi kategori kesalahan siswa, seperti kesalahan konten, penyimpangan konsep, dan ketidaktepatan struktur jawaban, sehingga sistem tidak hanya memberikan skor numerik tetapi juga umpan balik perbaikan. Penelitian ini mengusulkan pemodelan penilaian esai otomatis menggunakan transformer, yang dikombinasikan dengan modul analisis kesalahan untuk mengidentifikasi kekurangan jawaban secara terperinci. Hasil pengujian menunjukkan adanya peningkatan kinerja prediksi dibandingkan pendekatan berbasis word embedding. Solusi yang diusulkan berhasil mencapai nilai koefisien korelasi pearson (r) sebesar 0,8432 dan nilai rata-rata kesalahan absolut (MAE) sebesar 0,6013 pada proses scoring, serta mampu menghasilkan umpan balik kesalahan yang relevan dan dapat ditindaklanjuti oleh siswa. Temuan ini membuktikan bahwa integrasi transformer dan analisis kesalahan dapat meningkatkan ketepatan sistem dalam melakukan penilaian esai secara otomatis sekaligus memberikan dukungan formatif untuk meningkatkan kualitas tulisan siswa.