ANDY HUANG WIJAYA, -
(2024)
OPTIMASI PERTANYAAN MENGGUNAKAN REFINED
QUERY DALAM SISTEM TANYA JAWAB KITAB HADIS.
SATIN – Sains dan Teknologi Informasi, 10 (1).
pp. 45-56.
ISSN 2527-9114, DOI: 10.33372/stn.v9i2.1000
Abstract
Abstrak
Penelitian ini bertujuan untuk meningkatkan Sistem Tanya
Jawab untuk teks Hadis dengan menggabungkan teknik
Refined Query dan Large Language Models (LLMs),
khususnya GPT-4 dari OpenAI. Memanfaatkan dataset
sebanyak 62.169 Hadis dari sembilan buku penting.
Penelitian ini mengikuti metodologi komprehensif yang
mencakup pengumpulan, analisis, dan pra-pemrosesan data,
serta integrasi LangChain dan Large Language Models
(LLMs) OpenAI untuk kueri yang dioptimalkan. Evaluasi
kinerja sistem dilakukan melalui analisis komparatif sebelum
dan sesudah penerapan Refined Query, BERTScore untuk
kualitas teks, dan penilaian kualitas berbasis pengguna.
Hasilnya menunjukkan bahwa Refined Query secara
signifikan meningkatkan kapasitas sistem untuk
menghasilkan respons yang akurat dan relevan secara
kontekstual. Menerapkan Refined Query tidak hanya
meningkatkan ketepatan jawaban, tetapi juga memfasilitasi
pembuatan tanggapan yang sebelumnya tidak tersedia.
BERTScore rata-rata sebesar 0,80351 dan tingkat kulitas
jawaban dari pengguna dengan skor rata-rata 87,3% untuk
pengujian terhadap mahasiswa dan 90,3% pengujian kepada
ahli hadis semakin memvalidasi keampuhan sistem.
Actions (login required)
 |
View Item |
