OLGARADITYA, TEDDY (2026) OTOMATISASI ANALISIS DATA PROGRAM SOSIAL DENGAN INTEGRASI ALGORITMA CATBOOST, MODEL CONTEXT PROTOCOL DAN LARGE LANGUAGE MODEL. S2 thesis, Universitas Mercu Buana Jakarta- Menteng.
![[img]](https://repository.mercubuana.ac.id/style/images/fileicons/text.png) |
Text (COVER)
55424120003-TEDDYOLGARADITYA-01-COVER - Teddy Olgaraditya.pdf Download (1MB) |
|
Text (BAB 1)
55424120003-TEDDYOLGARADITYA-02-BAB 1 - Teddy Olgaraditya.pdf Restricted to Registered users only Download (696kB) |
|
Text (BAB 2)
55424120003-TEDDYOLGARADITYA-03-BAB 2 - Teddy Olgaraditya.pdf Restricted to Registered users only Download (1MB) |
|
Text (BAB 3)
55424120003-TEDDYOLGARADITYA-04-BAB 3 - Teddy Olgaraditya.pdf Restricted to Registered users only Download (1MB) |
|
Text (BAB 4)
55424120003-TEDDYOLGARADITYA-05-BAB 4 - Teddy Olgaraditya.pdf Restricted to Registered users only Download (1MB) |
|
Text (BAB 5)
55424120003-TEDDYOLGARADITYA-06-BAB 5 - Teddy Olgaraditya.pdf Restricted to Registered users only Download (679kB) |
|
Text (DAFTAR PUSTAKA)
55424120003-TEDDYOLGARADITYA-08-DAFTAR PUSTAKA - Teddy Olgaraditya.pdf Restricted to Registered users only Download (560kB) |
|
Text (LAMPIRAN)
55424120003-TEDDYOLGARADITYA-09-LAMPIRAN - Teddy Olgaraditya.pdf Restricted to Registered users only Download (494kB) |
Abstract
Pengelolaan dan verifikasi penerima program sosial menghadapi permasalahanBmendasar berupa ketidaktepatan sasaran (over coverage dan under coverage) serta kurangnya objektivitas dalam proses pengambilan keputusan. Pengguna bisnis dan analis juga menghadapi hambatan dalam mengekstraksi wawasan secara cepat akibat keterbatasan teknis, yang berdampak pada efektivitas evaluasi kelayakan penerima program. Penelitian ini bertujuan untuk membangun sistem otomatisasi untuk verifikasi program sosial. Penelitian ini menggunakan pendekatan Research and Development (R&D) dengan model Design Science Research (DSR), yang diuji pada dataset berskala besar sebanyak 75.101 data simulasi Program Jakarta Smart City. Kinerja model klasifikasi dievaluasi menggunakan algoritma CatBoost melalui metrik Accuracy, Precision, Recall, F1-Score, dan ROC AUC. Selain itu, sistem ini diintegrasikan dengan Large Language Model (LLM) Gemini 3.5 Flash melalui Model Context Protocol (MCP) Versi v.1.2.5. Modul verifikasi berbasis NIK juga dievaluasi kemampuannya dalam mendeteksi inclusion error dan penerima ganda secara otomatis menggunakan mekanisme Skor Komposit berskala 0–100. Hasil penelitian menunjukkan bahwa CatBoost mampu mereplikasi logika kebijakan deterministik secara sempurna dengan nilai Accuracy, Precision, Recall, F1-Score, dan ROC AUC masing-masing sebesar 100%. Pada skenario prediksi probabilistik, model menghasilkan Accuracy = 82,02%, Precision = 90,11%, Recall = 71,94%, F1-Score = 80,00%, dan ROC AUC = 88,17% untuk prediksi kelayakan penerima program sosial, serta Accuracy = 80,81%, Precision = 78,44%, Recall = 91,57%, F1-Score = 84,50%, dan ROC AUC = 85,19% untuk prediksi status kemiskinan. Pembahasan terkait LLM menunjukkan bahwa pemanfaatan Gemini 3.5 Flash yang diintegrasikan melalui MCP v.1.2.5 terbukti efektif mengubah dashboard statis menjadi sistem rekomendasi naratif yang objektif dan bebas halusinasi. Sistem ini merespons instruksi prompt query secara efisien dengan latensi 27–40 detik dan konsumsi di bawah 1.000 token per instruksi. Secara keseluruhan, sistem mampu memproses 75.101 data dalam waktu kurang dari 5 menit, membuktikan bahwa integrasi CatBoost dan LLM melalui MCP secara signifikan meningkatkan objektivitas dan transparansi proses verifikasi penerima program sosial.
| Item Type: | Thesis (S2) |
|---|---|
| NIM/NIDN Creators: | 55424120003 |
| Uncontrolled Keywords: | Program Sosial, Otomatisasi, Model Context Protocol, Large Language Model, CatBoost, Verifikasi, SQL |
| Subjects: | 600 Technology/Teknologi > 620 Engineering and Applied Operations/Ilmu Teknik dan operasi Terapan > 621 Applied Physics/Fisika terapan |
| Divisions: | Pascasarjana > Magister Teknik Elektro |
| Depositing User: | ZAHRA AULIA FEBRIANI |
| Date Deposited: | 24 Sep 2026 02:24 |
| Last Modified: | 24 Sep 2026 02:24 |
| URI: | http://repository.mercubuana.ac.id/id/eprint/104105 |
Actions (login required)
 |
View Item |
