digilib@itb.ac.id +62 812 2508 8800

Nizamixavier Rafif Lutvie [13519085].pdf
Terbatas  Dessy Rondang Monaomi
» Gedung UPT Perpustakaan

Proses wawancara adalah hal umum yang dilakukan pada rekrutmen pekerjaan oleh sebuah perusahaan. Saat ini, proses tersebut masih dilakukan secara manual oleh tenaga kerja manusia yang menyebabkan kebutuhan sumber daya yang banyak dan subjektivitas penilai. Oleh karena itu, diperlukan sebuah sistem yang dapat menilai kompetensi seseorang secara otomatis berdasarkan hasil wawancara orang tersebut dan kamus kompetensi yang dimiliki oleh sebuah perusahaan. Berdasarkan hasil riset, metode text similarity dengan modifikasi top-N pooling lebih cocok digunakan daripada metode text similarity tanpa modifikasi karena kemampuannya untuk hanya memproses kalimat-kalimat paling relevan pada teks sebagai nilai kemiripan dengan menggunakan model XLM-RoBERTA untuk mendapatkan akurasi terbaik karena ukuran model serta pelatihan data yang lebih besar dan model Cohere untuk mendapatkan waktu komputasi terbaik karena sudah disediakannya layanan API dengan daya komputasi yang sangat baik. Dari hasil pengujian alternatif metode text similarity dan model, solusi terbaik adalah menggunakan metode text similarity tanpa modifikasi dan model Cohere yang memiliki performa terbaik dengan akurasi sebesar 79% dengan waktu eksekusi rata-rata 4.5 detik untuk setiap transkrip wawancara. Sistem penilaian kompetensi dapat dibuat menggunakan text similarity dengan metode text similarity tanpa modifikasi memberikan performa yang lebih baik karena memiliki akurasi yang lebih baik dan waktu komputasi yang lebih kecil. Model Cohere lebih cocok untuk digunakan karena memiliki waktu komputasi yang lebih kecil dengan akurasi yang sama.