Abstrak
Penerapan Large Language Model Gemini dalam Teknik Ekstraksi Relasi pada Artikel Media Pemilihan Anggota Dewan Perwakilan Rakyat Jepang Tahun 2024
Oleh :
Alvin Rajendra Rabani - M0721004 - Fak. MIPA
Penelitian ini membahas penerapan model Large
Language Model (LLM) Gemini dalam tugas ekstraksi relasi berbasis artikel
berita politik dengan studi kasus pada Pemilihan Anggota Dewan Perwakilan
Rakyat Jepang tahun 2024. Ekstraksi relasi merupakan proses untuk
mengidentifikasi hubungan antara dua entitas dalam teks. Seiring semakin
cepatnya data berkembang pada saat ini di media, model seperti Support
Vector Machine (SVM), Long-short Term Memory (LSTM), dan Bidirectional
Encoder Representations from Transformers (BERT) memiliki keterbatasan
dalam beradaptasi terhadap data baru. Oleh karena itu, penelitian ini
mengevaluasi kemampuan Gemini dalam mengklasifikasikan hubungan antar partai
politik menggunakan metode zero-shot, one-shot, dan few-shot
prompting tanpa pelatihan ulang. Data diperoleh dari tiga media utama
Jepang: Asahi Shimbun, Mainichi Shimbun, dan Yomiuri Shimbun, dan
dievaluasi menggunakan metrik confusion matrix terhadap data berlabel
dari sumber resmi pemerintah. Hasil evaluasi menunjukkan bahwa metode zero-shot
memberikan performa terbaik dengan F1-Score sebesar 54%, diikuti oleh few-shot
(47%) dan one-shot (45%). Meskipun belum melampaui model yang telah ada,
Gemini menunjukkan potensi untuk diterapkan pada data yang bersifat dinamis dan
minim pelabelan manual.