EKSTRAKSI INFORMASI NILAI GIZI PADA LABEL KEMASAN MENGGUNAKAN CONFUSION-AWARE WEIGHTED LEVENSHTEIN DISTANCE DAN DIRECTION-AWARE SPATIAL ALIGNMENT

Abstract

Kesadaran masyarakat terhadap kandungan gizi produk makanan semakin meningkat, mendorong kebutuhan sistem ekstraksi informasi nilai gizi secara otomatis berbasis perangkat mobile. Permasalahan utama dalam otomatisasi pembacaan label nutrisi terletak pada kesalahan asosiasi spasial antara label dan nilai numerik, serta kesalahan substitusi karakter pada hasil OCR akibat kemiripan visual antar karakter. Penelitian ini bertujuan membangun ekstraksi informasi nilai gizi yang mampu membaca delapan nutrisi utama secara real-time dari citra kemasan makanan. Metode yang dikembangkan mengintegrasikan Confusion-Aware Weighted Levenshtein Distance (WLD) untuk koreksi teks OCR berbasis matriks konfusi karakter, dan Direction-Aware Spatial Alignment untuk penyelarasan nilai numerik berbasis bounding box, diimplementasikan dalam arsitektur MVVM dengan mekanisme human-in-the-loop dan rekomendasi Generative AI. Pengujian terhadap 30 sampel kemasan (240 field) menunjukkan rata-rata Precision 98,69%, Recall 82,07%, F1-score 89,61%, dan Accuracy 85,42%, dengan rata-rata MAE 4,296. Sistem terbukti andal pada kemasan datar, meskipun label semi-terstruktur dan kemasan melengkung masih menjadi tantangan yang perlu diatasi pada penelitian selanjutnya