Sistem Presensi Pegawai Menggunakan Face Recognition Berbasis Android
Abstrak
Presensi merupakan aspek penting dalam manajemen perusahaan karena berfungsi sebagai pencatat kehadiran dan jam kerja pegawai. PT Hummatech Digital, sebuah perusahaan di bidang teknologi informasi, menghadapi tantangan dalam pemantauan presensi pegawai secara real time. Sistem presensi saat ini menggunakan aplikasi berbasis Android dengan RFID reader yang terhubung ke perangkat tablet. Meskipun demikian, sistem ini rentan terhadap manipulasi karena kartu dapat digunakan oleh siapa saja. Untuk mengatasi masalah ini, pada tugas akhir ini diimplementasikan teknologi face recognition dan liveness detection menggunakan CNN (Convolutional Neural Network). Teknologi ini memungkinkan presensi hanya dilakukan jika pegawai berada di lokasi dan dikenali sebagai pemilik kartu asli. Pengembangan ini menggunakan model MiniFasNet dengan melakukan transformasi fourier pada wajah menjadi sinyal berupa gelombang frekuensi sebagai fitur liveness detection dikombinasikan dengan model FaceNet dengan melakukan ekstraksi matriks pada wajah dan dicocokan pada dataset dengan formula triplet loss dan cosine similarity sebagai penentu kemiripan fitur yang diambil secara live dengan fitur dataset yang disimpan. Pengembangan ini menghasilkan nilai confidence score pada liveness detection sebesar 0.9 dan rata-rata skor face recognition sebesar 0.65. Akurasi sistem rekognisi terbaik didapatkan sebesar 98% pada jarak 50 cm dengan pose wajah menghadap depan dan kondisi cahaya terang.