Hybrid Retrieval with Legal Signal Boosting for Indonesia’s Job Creation Law and Implementing Regulations

• By Rheno Septianto; Yan Rianto;
• Tesis
• 2
• 1-77

Penelitian ini mengembangkan sistem penelusuran regulasi berbasis RetrievalAugmented Generation pada Undang-Undang Cipta Kerja dan peraturan pemerintah
turunannya. Knowledge base terdiri atas Undang-Undang Nomor 6 Tahun 2023 dan
15 peraturan pemerintah yang dipisahkan menjadi Corpus A dan Corpus B-Core.
Dokumen disegmentasi sesuai karakter corpus, direpresentasikan menggunakan
Multilingual E5, dan diindeks dengan FAISS. Evaluasi retrieval menggunakan 50
pertanyaan per skenario. Hybrid RRF dengan legal signal boosting mencapai Hit@10
100% pada kedua corpus, MRR 0,850190 dan 0,966667, serta Recall@10 78,33% dan
33,79%. Cakupan dua corpus mencapai 92%, sedangkan ketepatan routing mencapai
100% pada set uji seimbang. Analisis dua konfigurasi menunjukkan kontribusi legal
signal boosting. Setelah perbaikan pengambilan evidence, 28 dari 30 jawaban
memenuhi kriteria kesesuaian kutipan dan rujukan terhadap sumber asli. Hasil
jawaban terbatas pada set pengembangan untuk kutipan faktual. Validasi ahli hukum
tidak dilakukan sehingga ketepatan penafsiran hukum belum dapat disimpulkan.

• Katakunci Retrieval-Augmented Generation, penguatan sinyal hukum, perutean pertanyaan, temu kembali informasi hukum, Undang-Undang Cipta Kerja
• URL http://
• Penerbit KINETIK: Game Technology, Information System, Computer Network, Computing, Electronics, and Control, Malang Jawa Timur

REFERENSI

DAFTAR REFERENSI

[1]      P. Zhao dkk., “Retrieval-Augmented Generation for AI-Generated Content: A Survey,” Jun 2024, [Daring]. Tersedia pada: http://arxiv.org/abs/2402.19473

[2]      Y. Gao dkk., “Retrieval-Augmented Generation for Large Language Models: A Survey,” Mar 2024, [Daring]. Tersedia pada: http://arxiv.org/abs/2312.10997

[3]      P. Lewis, “Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks,” dalam Advances in Neural Information Processing Systems, 2020.

[4]      Republik Indonesia, “Undang-Undang Republik Indonesia Nomor 6 Tahun 2023 tentang Penetapan Peraturan Pemerintah Pengganti Undang-Undang Nomor 2 Tahun 2022 tentang Cipta Kerja Menjadi Undang-Undang,” 2023.

[5]      Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 37 Tahun 2021 tentang Penyelenggaraan Program Jaminan Kehilangan Pekerjaan,” 2021.

[6]      Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 36 Tahun 2021 tentang Pengupahan,” 2021.

[7]      Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 35 Tahun 2021 tentang Perjanjian Kerja Waktu Tertentu, Alih Daya, Waktu Kerja dan Waktu Istirahat, dan Pemutusan Hubungan Kerja,” 2021.

[8]      Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 29 Tahun 2021 tentang Penyelenggaraan Bidang Perdagangan,” 2021.

[9]      Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 28 Tahun 2021 tentang Penyelenggaraan Bidang Perindustrian,” 2021.

[10]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 27 Tahun 2021 tentang Penyelenggaraan Bidang Kelautan dan Perikanan,” 2021.

[11]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 26 Tahun 2021 tentang Penyelenggaraan Bidang Pertanian,” 2021.

[12]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 23 Tahun 2021 tentang Penyelenggaraan Kehutanan,” 2021.

[13]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 22 Tahun 2021 tentang Penyelenggaraan Perlindungan dan Pengelolaan Lingkungan Hidup,” 2021.

[14]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 21 Tahun 2021 tentang Penyelenggaraan Penataan Ruang,” 2021.

[15]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 19 Tahun 2021 tentang Penyelenggaraan Pengadaan Tanah bagi Pembangunan untuk Kepentingan Umum,” 2021.

[16]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 18 Tahun 2021 tentang Hak Pengelolaan, Hak Atas Tanah, Satuan Rumah Susun, dan Pendaftaran Tanah,” 2021.

[17]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 6 Tahun 2021 tentang Penyelenggaraan Perizinan Berusaha di Daerah,” 2021.

[18]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 7 Tahun 2021 tentang Kemudahan, Pelindungan, dan Pemberdayaan Koperasi dan Usaha Mikro, Kecil, dan Menengah,” 2021.

[19]    Republik Indonesia, “Peraturan Pemerintah Republik Indonesia Nomor 5 Tahun 2021 tentang Penyelenggaraan Perizinan Berusaha Berbasis Risiko,” 2021.

[20]    L. Wang, N. Yang, X. Huang, L. Yang, R. Majumder, dan F. Wei, “Multilingual E5 Text Embeddings: A Technical Report,” Feb 2024, [Daring]. Tersedia pada: http://arxiv.org/abs/2402.05672

[21]    M. Douze dkk., “The Faiss library,” Okt 2025, [Daring]. Tersedia pada: http://arxiv.org/abs/2401.08281

[22]    N. R. N. Thakur A. Rucklé A. Srivastava dan I. Gurevych, “BEIR: A Heterogeneous Benchmark for Zero-shot Evaluation of Information Retrieval Models,” dalam NeurIPS Datasets and Benchmarks, 2021.

[23]    Y. Jiang, Z. Guan, J. Zhao, W. Zhao, dan J. Yang, “H-LegalKI: A Hierarchical Legal Knowledge Integration Framework for Legal Community Question Answering,” 2024. [Daring]. Tersedia pada: https://stackexchange.com

[24]    G. Izacard dkk., “Unsupervised Dense Information Retrieval with Contrastive Learning,” Agu 2022, [Daring]. Tersedia pada: http://arxiv.org/abs/2112.09118

[25]    Suharyadi dan I. Saputra, “Hybrid Ensemble Retrieval-Augmented Generation for Indonesian Legal Consultation with Keyword Boosting,” Journal of Novel Engineering Science and Technology, vol. 4, no. 02, hlm. 71–85, Jul 2025, doi: 10.56741/jnest.v4i02.1042.

[26]    J. J. S. K. Es L. Espinosa-Anke dan S. Schockaert, “RAGAS: Automated Evaluation of Retrieval Augmented Generation,” dalam EACL, 2024.

[27]    J. Saad-Falcon, “ARES: An Automated Evaluation Framework for Retrieval-Augmented Generation Systems,” dalam NAACL, 2024.

[28]    N. Pipitone dan G. H. Alami, “LegalBench-RAG: A Benchmark for Retrieval-Augmented Generation in the Legal Domain,” Agu 2024, [Daring]. Tersedia pada: http://arxiv.org/abs/2408.10343

[29]    D. Trautmann dkk., “Measuring the Groundedness of Legal Question-Answering Systems,” 2024. [Daring]. Tersedia pada: https://casetext.com/cocounsel/

[30]    Z. Fei, “LawBench: Benchmarking Legal Knowledge of Large Language Models,” dalam EMNLP, 2024.

[31]    N. Guha dkk., “LegalBench: A Collaboratively Built Benchmark for Measuring Legal Reasoning in Large Language Models,” Agu 2023, [Daring]. Tersedia pada: http://arxiv.org/abs/2308.11462

[32]    F. Redelaar, R. Van Drie, S. Verberne, dan M. De Boer, “Attributed Question Answering for Preconditions in the Dutch Law,” 2024. [Daring]. Tersedia pada: https://gitlab.com/normativesystems/

[33]    H.-L. Nguyen, D.-M. Nguyen, T.-M. Nguyen, H.-T. Nguyen, T.-H.-Y. Vuong, dan K. Satoh, “Enhancing Legal Document Retrieval: A Multi-Phase Approach with Large Language Models,” Mar 2024, [Daring]. Tersedia pada: http://arxiv.org/abs/2403.18093

[34]    S. Khazaeli Janardhana Punuru Chad Morris Sanjay Sharma Bert Staub Michael Cole, S. Chiu-Webster, dan D. Sakalley Sensibill, “A Free Format Legal Question Answering System,” 2021.

[35]    N. Wiratunga dkk., “CBR-RAG: Case-Based Reasoning for Retrieval Augmented Generation in LLMs for Legal Question Answering,” Apr 2024, [Daring]. Tersedia pada: http://arxiv.org/abs/2404.04302

[36]    R. Kalra dkk., “HyPA-RAG: A Hybrid Parameter Adaptive Retrieval-Augmented Generation System for AI Legal and Policy Applications,” 2024. [Daring]. Tersedia pada: https://github.com/holistic-ai/HyPA-RAG.

[37]    A. Q. Jiang dkk., “Mixtral of Experts,” Jan 2024, [Daring]. Tersedia pada: http://arxiv.org/abs/2401.04088

[38]    W. Gata dan A. Bayhaqy, “Analysis sentiment about islamophobia when Christchurch attack on social media,” Telkomnika (Telecommunication Computing Electronics and Control), vol. 18, no. 4, hlm. 1819–1827, 2020, doi: 10.12928/TELKOMNIKA.V18I4.14179.

[39]    W. Gata, P. Sarjana, D. N. Sulistyowati, N. Kusuma, W. Fakultas, dan E. Dan Bisnis, “Informative Tweet Classification of the Earthquake Disaster Situation In Indonesia,” 2019. [Daring]. Tersedia pada: http://gataframework.com/textmining

[40]    L. P. Manik, “Performance Factors Effect on the Performance Metrics of the Enterprise Service Bus,” International Journal of Computing and Digital Systems, vol. 11, no. 1, hlm. 107–115, 2022, doi: 10.12785/ijcds/110108.

[41]    L. P. Manik, “FEATURES ENGINEERING WITH GENERATING GENETIC ALGORITHM FOR SOFTWARE EFFORT ESTIMATION,” ICIC Express Letters, Part B: Applications, vol. 13, no. 1, Jan 2022, doi: 10.24507/icicelb.13.01.1.

[42]    R. Shinta Oktaviana dkk., “Search Recommendations and Their Impact on Gen Z’s Shopping Journey on e-Commerce,” dalam 2025 16th International Conference on E-Education, E-Business, E-Management and E-Learning, IC4e 2025, Institute of Electrical and Electronics Engineers Inc., 2025, hlm. 491–495. doi: 10.1109/IC4e65071.2025.11075451.

[43]    R. Shinta Oktaviana, E. H. Hermaliani, Nurmalasari, M. R. R. Saelan, dan E. P. Tamara, “User Satisfaction Factors Self-Service Technology in Fast Food Restaurants Using The Heuristic Evaluation Method,” dalam 2023 8th International Conference on Informatics and Computing, ICIC 2023, Institute of Electrical and Electronics Engineers Inc., 2023. doi: 10.1109/ICIC60109.2023.10382056.

[44]    L. P. Manik dkk., “Usability and acceptance of crowd-based early warning of harmful algal blooms,” PeerJ, vol. 11, Mar 2023, doi: 10.7717/peerj.14923.

[45]    L. P. Manik dkk., “Out-of-Scope Intent Detection on A Knowledge-Based Chatbot,” International Journal of Intelligent Engineering and Systems, vol. 14, no. 5, hlm. 446–457, 2021, doi: 10.22266/ijies2021.1031.39.

[46]    M. Lasandi dan N. Jayatilleke, “SinhaLegal: A Benchmark Corpus for Information Extraction and Analysis in Sinhala Legislative Texts,” Mar 2026, [Daring]. Tersedia pada: http://arxiv.org/abs/2603.04854

[47]    Z. Zhong, H. Liu, X. Cui, X. Zhang, dan Z. Qin, “Mix-of-Granularity: Optimize the Chunking Granularity for Retrieval-Augmented Generation,” Jan 2025, [Daring]. Tersedia pada: http://arxiv.org/abs/2406.00456

[48]    G. V. Cormack, C. L. A. Clarke, dan S. Buettcher, “Reciprocal rank fusion outperforms condorcet and individual rank learning methods,” dalam Proceedings of the 32nd international ACM SIGIR conference on Research and development in information retrieval, New York, NY, USA: ACM, Jul 2009, hlm. 758–759. doi: 10.1145/1571941.1572114.

[49]    M. Akarsu, R. K. Karaman, dan C. Mierbach, “From BM25 to Corrective RAG: Benchmarking Retrieval Strategies for Text-and-Table Documents,” Apr 2026, [Daring]. Tersedia pada: http://arxiv.org/abs/2604.01733