Petunjuk Operasional Kegiatan Jawatimur

Penelitian ini difokuskan pada otomasi penyusunan narasi laporan keuangan pemerintah daerah dengan mengubah data belanja dan kegiatan yang kompleks dari dokumen Petunjuk Operasional Kegiatan (POK) menjadi ringkasan teks yang informatif bagi para pemangku kepentingan. Masalah utama yang diangkat adalah kompleksitas data tabular pada POK Pemerintah Provinsi Jawa Timur yang sulit diinterpretasi secara cepat oleh pejabat pengawas maupun masyarakat umum. Selain itu, terdapat isu efisiensi pelaporan karena proses manual dalam menyusun narasi dari data realisasi memakan waktu berjam-jam bagi staf perencana, serta adanya tantangan akurasi numerik untuk menghindari fenomena numerical hallucination di mana model AI berisiko salah dalam menyajikan angka-angka krusial.Untuk mengatasi permasalahan tersebut, peneliti menggunakan data dari wilayah Jawa Timur dengan sumber utama dari Portal PPID Provinsi Jawa Timur untuk mengambil dokumen POK dan data terkait anggaran lainnya. Dataset ini dikembangkan dengan menggabungkan berbagai sumber data publik pemerintah guna memperkaya kualitas fine-tuning model. Metode yang diterapkan adalah eksperimen kuantitatif melalui fine-tuning pada model Transformer, seperti mT5 atau IndoBART, yang dirancang untuk memetakan data terstruktur menjadi teks deskriptif.Alur kerja sistem ini mencakup beberapa tahapan teknis, dimulai dari data linearization untuk mengonversi tabel anggaran menjadi format teks linear yang dapat dipahami oleh model AI. Selanjutnya, pada tahap text generation, model melakukan peringkasan dengan memperhatikan relasi antar angka dan kegiatan secara mendalam. Kualitas hasil peringkasan kemudian diukur melalui evaluasi multidimensi yang menggunakan metrik otomatis seperti ROUGE dan BERTscore, serta evaluasi manual untuk memastikan aspek faithfulness atau kesetiaan ringkasan terhadap data numerik aslinya.