Abstract:Abstract: This study discusses the optimization of RAG for a FAQ system in the field of information technology product security certification at BSSN. Although LLM generate reliable responses, they often lack up-to-date…
and domain-specific knowledge, which can be addressed through the RAG approach. This research aims to optimize a domain-specific RAG system by improving embedding performance, enhancing prompt robustness, and increasing retrieval accuracy. The research methods consist of three stages. The first stage involves fine-tuning the bge-m3 embedding model and evaluating its performance using MRR, Recall, and AUC. The second stage applies prompt engineering techniques, namely the SRSM and Autodefense, to mitigate direct-injection and escape-character prompt injection attacks. The third stage evaluates the proposed RAG system using Precision, Recall, and F1-Score metrics against four baseline models. The results of research show that the fine-tuned embedding model achieves higher performance than the original model, with MRR@1 and Recall@1 values of 0.80 and an AUC@100 of 0.7023. In addition, the proposed prompt engineering techniques demonstrate robustness against prompt injection attacks, while the overall RAG system attains a perfect Precision, Recall, and F1-Score of 1.00. In conclusion, the proposed approach effectively enhances retrieval accuracy, embedding quality, and system security, resulting in a more reliable RAG-based FAQ system for information technology product security certification.
Keywords: embedding fine-tuning; large language model; prompt engineering; prompt injection mitigation; retrieval-augmented generation
Abstrak: Studi ini membahas optimasi RAG untuk sistem FAQ di bidang sertifikasi keamanan produk teknologi informasi di BSSN. Meskipun LLM menghasilkan respons yang andal, mereka seringkali kurang memiliki pengetahuan terkini dan spesifik domain, yang dapat diatasi melalui pendekatan RAG. Penelitian ini bertujuan untuk mengoptimalkan sistem RAG spesifik domain dengan meningkatkan kinerja embedding, meningkatkan ketahanan prompt dan meningkatkan akurasi pengambilan. Metode penelitian terdiri dari tiga tahap. Tahap pertama melibatkan fine-tuning model embedding bge-m3 dan mengevaluasi kinerjanya menggunakan Mean Reciprocal Rank (MRR), Recall, dan AUC. Tahap kedua menerapkan teknik rekayasa prompt, yaitu Self- SRSM dan Autodefense, untuk mengurangi serangan direct-injection dan escape-character prompt injection. Tahap ketiga mengevaluasi sistem RAG yang diusulkan menggunakan metrik Presisi, Recall, dan F1-Score terhadap empat model dasar. Hasil penelitian menunjukkan bahwa model embedding yang disempurnakan mencapai kinerja yang lebih tinggi daripada model asli, dengan nilai MRR@1 dan Recall@1 sebesar 0,80 dan AUC@100 sebesar 0,7023. Selain itu, teknik rekayasa prompt yang diusulkan menunjukkan ketahanan terhadap serangan injeksi prompt, sementara sistem RAG secara keseluruhan mencapai Presisi, Recall, dan F1-Score sempurna sebesar 1,00. Kesimpulannya, pendekatan yang diusulkan secara efektif meningkatkan akurasi pengambilan, kualitas embedding dan keamanan sistem, menghasilkan sistem FAQ berbasis RAG yang lebih andal untuk sertifikasi keamanan produk teknologi informasi.
Kata kunci: penyempurnaan embedding; model bahasa besar; rekayasa prompt; mitigasi injeksi prompt; retrieval-augmented generation
Abstract:Abstract: The policy to increase the Rural and Urban Land and Building Tax (PBB-P2) in Indonesia often elicits mixed reactions from the public. Some support it because they believe it can strengthen regional fiscal capacity,…
ity, while others reject it because they are concerned that it will increase the economic burden on the community. Understanding public sentiment towards this policy is important for evaluating the effectiveness of the policy and formulating appropriate communication strategies. This study aims to analyze public sentiment towards the PBB-P2 increase policy using data uploaded on Platform X (Twitter). The data were collected through crawling with the keyword “building tax,” then processed through several preprocessing stages before classifying tweets into positive and negative sentiments. Two models were used: Support Vector Machine (SVM) and Bidirectional Long Short-Term Memory (BiLSTM). Results show that SVM outperformed BiLSTM, achieving training accuracy of 99.4% and testing accuracy of 85.9%, with accuracy 0.8595, precision 0.8536, recall 0.8595, and F1-score 0.8449. Meanwhile, BiLSTM achieved training accuracy of 86.9% and testing accuracy of 82.9%, with accuracy 0.8294, precision 0.8150, recall 0.8294, and F1-score 0.8080. These findings suggest SVM is more effective in classifying public sentiment and can support better evaluation of regional tax policies.
Keywords: sentiment analysis; PBB-P2; BiLSTM; SVM; X platform
Abstrak: Kebijakan kenaikan tarif Pajak Bumi dan Bangunan Perdesaan dan Perkotaan (PBB-P2) di In-donesia sering memunculkan beragam reaksi dari masyarakat. Sebagian mendukung karena dianggap dapat memperkuat kapasitas fiskal daerah, sementara lainnya menolak karena kha-watir menambah beban ekonomi masyarakat. Pemahaman terhadap sentimen publik atas ke-bijakan tersebut penting untuk mengevaluasi efektivitas kebijakan dan merumuskan strategi komunikasi yang tepat. Penelitian ini bertujuan menganalisis sentimen masyarakat terhadap kebijakan kenaikan PBB-P2 menggunakan data unggahan di Platform X (Twitter). Data dik-umpulkan melalui proses crawling dengan kata kunci “pajak bangunan” kemudian diproses melalui beberapa tahap preprocessing sebelum diklasifikasikan menjadi sentimen positif dan negatif. Dua model digunakan dalam penelitian ini, yaitu Support Vector Machine (SVM) dan Bidirectional Long Short-Term Memory (BiLSTM). Hasil penelitian menunjukkan bahwa SVM memiliki kinerja lebih baik dibandingkan BiLSTM, dengan akurasi pelatihan 99,4% dan akurasi pengujian 85,9%. Nilai akurasi 0,8595, precision 0,8536, recall 0,8595, dan F1-score 0,8449. Sementara itu, BiLSTM memperoleh akurasi pelatihan 86,9% dan akurasi pengujian 82,9%, dengan akurasi 0,8294, precision 0,8150; recall 0,8294; dan F1-score 0,8080. Temuan ini menunjukkan bahwa SVM lebih efektif dalam mengklasifikasikan sentimen publik serta dapat mendukung evaluasi kebijakan pajak daerah dengan lebih baik.
Kata kunci: analisis sentimen; PBB-P2; BiLSTM; SVM; platform X
Abstract:Abstract: INET Computer Palembang, as a computer training institution, faces difficulties in understanding participant characteristics due to variations in age, educational background, and chosen course packages. This study…
udy aims to analyze participant criteria and group them based on similarities using the K-Means Clustering algorithm. The data used were historical records of course participants from 2022 to 2025. The research process followed the CRISP-DM stages, starting from data cleaning and transformation, determining the optimal number of clusters using the Elbow Method, to evaluating cluster quality with the Davies-Bouldin Index. The implementation was carried out using Python and the scikit-learn library. The results show that the optimal number of clusters is k=5 with a Sum of Squared Errors (SSE) value of 1064.66 and a Davies-Bouldin Index (DBI) score of 0.820, indicating good cluster quality. The resulting clustering provides a structured profile of participants and demonstrates that K-Means is effective in segmenting course participants. These findings are expected to assist the institution in designing more targeted training programs.
Keywords: clustering; data mining; elbow method; k-means; computer course
Abstract:Abstract: Heart disease is one of the leading causes of death worldwide, making early detection and accurate diagnosis crucial for reducing mortality rates and improving patient outcomes. This study aims to evaluate the…
effectiveness of four machine learning algorithms—Logistic Regression, Random Forest, Support Vector Machine (SVM), and K-Nearest Neighbors (KNN)—in predicting heart disease, with a focus on enhancing model performance using Linear Discriminant Analysis (LDA) for feature reduction. Among the models, SVM achieved the highest accuracy at 84.24%, followed by Logistic Regression at 83.70%. Although Random Forest and KNN showed lower accuracies, all models benefited from LDA's dimensionality reduction. This study suggests that SVM, combined with LDA, offers an optimal solution for early and accurate heart disease prediction in the healthcare industry.
Keywords: feature reduction; heart disease; linear discriminant analysis (LDA); machine learning; SVM
Abstrak: Penyakit jantung merupakan salah satu penyebab utama kematian di seluruh dunia, sehingga deteksi dini dan diagnosis yang akurat sangat penting untuk menurunkan angka kematian dan meningkatkan hasil pengobatan pasien. Penelitian ini bertujuan untuk mengevaluasi efektivitas empat algoritma pembelajaran mesin—Regresi Logistik, Random Forest, Support Vector Machine (SVM), dan K-Nearest Neighbors (KNN)—dalam memprediksi penyakit jantung, dengan fokus pada peningkatan kinerja model menggunakan Analisis Diskriminan Linear (LDA) untuk reduksi fitur. Di antara model yang diuji, SVM mencapai akurasi tertinggi sebesar 84,24%, diikuti oleh Regresi Logistik dengan 83,70%. Meskipun Random Forest dan KNN menunjukkan akurasi yang lebih rendah, semua model memperoleh manfaat dari reduksi dimensi yang diberikan oleh LDA. Studi ini menunjukkan bahwa SVM yang dikombinasikan dengan LDA merupakan solusi optimal untuk prediksi penyakit jantung secara dini dan akurat dalam industri kesehatan.
Kata kunci: linear discriminant analysis (LDA); machine learning; penyakit jantung; reduksi fitur; SVM.
Abstract:Abstract: The development of Internet of Things (IoT) technology has significantly impacted life, particularly in creating more efficient and secure smart homes. Smart homes integrate various electronic devices to enhance…
e comfort and energy efficiency. However, cost, integration complexity, and security issues remain. This study will simulate an IoT-based smart home system to analyse and evaluate device performance before real-world implementation. The simulation method involves testing connectivity and evaluating delay and packet loss using the ping method on each device. Results show the highest delay on CCTV devices at 41.8 ms and the lowest on motion detector 2 at 32.8 ms, with 0% packet loss. According to TIPHON standards, the network is rated excellent with an index of 4. The designed smart home system demonstrates optimal performance and is feasible for implementation but requires further development in configuration using AI and machine learning technologies.
Keywords: internet of things; simulation; smart home; testing
Abstrak: Perkembangan teknologi Internet of Things (IoT) telah membawa perubahan signifikan dalam kehidupan, terutama dalam pengembangan rumah pintar (smart home) yang lebih efisien dan aman. Smart home mengintegrasikan berbagai perangkat elektronik untuk meningkatkan kenyamanan dan efisiensi energi. Meskipun demikian, tantangan seperti biaya, kompleksitas integrasi, dan isu keamanan masih ada. Penelitian ini bertujuan untuk mensimulasikan sistem smart home berbasis IoT guna menganalisis dan mengevaluasi kinerja perangkat sebelum implementasi nyata. Metode simulasi yang digunakan melibatkan pengujian konektivitas dan evaluasi delay serta packet loss dengan metode ping pada setiap perangkat. Hasil menunjukkan delay tertinggi pada perangkat CCTV sebesar 41.8 ms dan terendah pada motion detector 2 sebesar 32.8 ms, dengan packet loss 0%. Berdasarkan standar TIPHON, jaringan dinilai sangat baik dengan indeks 4. Sistem smart home yang dirancang menunjukkan kinerja optimal dan layak diimplementasikan, namun masih memerlukan pengembangan lebih lanjut dalam konfigurasi menggunakan teknologi AI dan machine learning.
Keywords: internet of things; pengujian; simulasi; smart home
Abstract:Abstract: This research aims to build a recommendation system that can help parents determine the best Pendidikan Anak Usia Dini (PAUD) using the ELECTRE (Elimination and Choice Translating Reality) method. The electre method…
ethod was chosen because of its ability to handle Multi-Criteria Decision Making (MCDM) problems, which allows evaluating alternatives based on various relevant criteria. This system is designed to identify and assess PAUD based on a number of important criteria, such as facilities, location, teacher-student ratio, curriculum, accreditation and reputation. Each criterion is given a weight according to its level of importance, which is determined based on parental preferences and applicable educational standards. Data is collected from various sources and processed using artificial intelligence techniques to ensure accuracy and relevance. The electre method is then used to evaluate and compare between PAUD. The research results show that the recommendation system developed is able to provide accurate and relevant PAUD recommendations, as well as increasing user satisfaction in the PAUD selection process. This research makes a significant contribution to the field of decision support systems and education, by showing the practical application of the electre method in determining the best PAUD. It is hoped that the results of this research can inspire the development of similar recommendation systems in other educational fields, as well as help in improving the quality of early childhood education through the use of advanced technology.
Keywords: artificial intelligence; electre method; multi-criteria decision making (mcdm); paud.
Abstrak: Penelitian ini bertujuan untuk membangun sistem rekomendasi yang dapat membantu orang tua dalam menentukan Pendidikan Anak Usia Dini (PAUD) terbaik dengan menggunakan metode ELECTRE (Elimination and Choice Translating Reality). Metode electre dipilih karena kemampuannya dalam menangani masalah Multi-Criteria Decision Making (MCDM), yang memungkinkan evaluasi alternatif berdasarkan berbagai kriteria yang relevan. Sistem ini dirancang untuk mengidentifikasi dan menilai PAUD berdasarkan sejumlah kriteria penting, seperti fasilitas, lokasi, rasio guru-murid, kurikulum, akreditasi dan reputasi. Setiap kriteria diberikan bobot sesuai dengan tingkat kepentingannya yang ditentukan berdasarkan preferensi orang tua dan standar pendidikan yang berlaku. Data dikumpulkan dari berbagai sumber dan diproses menggunakan teknik kecerdasan buatan untuk memastikan akurasi dan relevansi. Metode electre kemudian digunakan untuk melakukan evaluasi dan perbandingan antar PAUD. Hasil penelitian menunjukkan bahwa sistem rekomendasi yang dikembangkan mampu memberikan rekomendasi PAUD yang akurat dan relevan, serta meningkatkan kepuasan pengguna dalam proses pemilihan PAUD. Penelitian ini memberikan kontribusi signifikan pada bidang sistem pendukung keputusan dan pendidikan, dengan menunjukkan aplikasi praktis dari metode electre dalam penentuan PAUD terbaik. Diharapkan, hasil penelitian ini dapat menginspirasi pengembangan sistem rekomendasi serupa di bidang pendidikan lainnya, serta membantu dalam meningkatkan kualitas pendidikan anak usia dini melalui pemanfaatan teknologi canggih.
Kata kunci: kecerdasan buatan; metode electre; multi-criteria decision making (mcdm); paud.
Abstract:Abstract: Gallery Parfume Shop is a business engaged in cosmetics located on Jalan Merdeka, Simpang Empat, Kec. Tanjung Tiram, Kab. Batu Bara, North Sumatra. In the procedures and management of sales management at Gallery…
y Parfume is still done manually, the reports are still recorded in notes the impact of this is that Gallery Parfume has difficulty in evaluating their sales performance, identifying market trends, and planning effective sales strategies and also difficulty building loyalty. Therefore, a system is needed, by implementing E-CRM at Gallery Parfume can get new customers, improve customer relationships, and retain customers, which will ultimately create customer loyalty and to measure the increase in profitability resulting from the use of E-CRM into a web-based application so that it will later facilitate increasing sales, customer loyalty, and saving operational costs. The method used to collect and analyze this research data is a qualitative method. It is expected that through this web application it can also build a database to make it easier for Gallery Parfume to search for data and reports.
Keywords: consumers; e-crm; stores
Abstrak: Toko Gallery Parfume merupakan usaha yang bergerak dibidang kosmetik yang berada dijalan Merdeka, Simpang Empat, Kec. Tanjung Tiram, Kab. Batu Bara, Sumatera Utara. Dalam prosedur dan manajemen pengelolaan penjualan di Gallery Parfume masih dilakukan secara manual, laporan nya masih tercatat di notes dampak dari hal tersebut gallery Parfume kesulitan dalam mengevaluasi kinerja penjualan mereka, mengidentifikasi tren pasar, dan merencanakan strategi penjualan yang efektif juga kesulitan membangun loyalitas. Maka dengan hal itu diperlukan sebuah sistem, dengan menerapkan E-CRM di Gallery Parfume dapat memperoleh pelanggan baru, meningkatkan hubungan dengan pelanggan, dan mempertahankan pelanggan, yang pada akhirnya akan terciptanya loyalitas pelanggan dan untuk mengukur peningkatan profitabilitas yang dihasilkan dari penggunaan E-CRM kedalam bentuk aplikasi berbasis web agar nantinya memudahkan dalam peningkatan penjualan, loyalitas pelanggan, dan penghematan biaya operasional. Metode yang digunakan untuk mengumpulkan dan menganalisis data penelitian ini dengan metode kualitatif. Diharapankan melalui aplikasi web ini juga dapat membangun database guna memudahkan Gallery Parfume dalam mencari data dan laporan.
Kata Kunci: e-crm; konsumen; toko
Abstract:Abstract: In the health sector, information technology was initially used for exchanging information between patients and doctors, health services, and exchanging health documents. The aim of applying information technology…
ogy to the health sector is to increase the effectiveness and efficiency of the performance of doctors and clinic staff. This research uses COBIT 2019 as a framework for evaluating information technology governance. Primary data is collected directly from the research subjects through observation and interviews, while secondary data is sourced from other materials, such as documents or websites related to the research subject. This research focuses on Risk Profile and I&T Related Issues, with domains: APO11 – Managed Quality, and APO13 – Managed Security. Through interviews and evaluation, each priority objective was found to be at capability level 2 with ratings of 100% and 86% respectively. There are no significant gaps between the current capability levels; both are at level 2.
Keywords: auditing; COBIT 2019; telemedicine
Abstrak: Di sektor kesehatan, teknologi informasi awalnya digunakan untuk pertukaran informasi antara pasien dan dokter, layanan kesehatan, dan pertukaran dokumen kesehatan. Tujuan penerapan teknologi informasi di sektor kesehatan adalah untuk meningkatkan efektivitas dan efisiensi kinerja dokter dan staf klinik. Penelitian ini menggunakan COBIT 2019 sebagai kerangka kerja untuk mengevaluasi tata kelola teknologi informasi. Data primer dikumpulkan langsung dari subjek penelitian dengan melakukan pengamatan dan interaksi langsung, sementara data sekunder diperoleh dari sumber lain. didapatkan dari jurnal atau situs website yang berkaitan dengan subjek penelitian. Penelitian ini berfokus pada Risk Profile dan I&T Related Issues, dengan domain : APO11 – Managed Quality, dan APO13 – Managed Security. Melalui wawancara dan evaluasi, setiap tujuan prioritas ditemukan berada pada level kapabilitas 2 dengan nilai masing-masing 100% dan 86%. Tidak ada kesenjangan signifikan antara tingkat kapabilitas saat ini; keduanya berada pada level 2.
Kata kunci: audit; COBIT 2019; telemedis
Abstract:Abstract: The Manual Drawing Laboratory and Computer Laboratory of the Furniture Design Study Program are some of the infrastructures used to support learning and practicum in the Polytechnic of Furniture Industry and Wood…
od Processing. Services at these two laboratories utilize the Laboratory website which can be accessed publicly via the address https://labdesainfurnitur.poltek-furnitur.ac.id/, in which the purpose of developing the website is to simplify the process for stakeholders to access information regarding practicum activities conducted in the laboratories. Ease of access to this information needs to be evaluated, especially related to usability on the website. The evaluation of the laboratory website's usability is performed using the System Usability Scale (SUS) method, which provides a structured approach to measuring the effectiveness and user experience of the website. It is hoped to obtain a representation of the user's experience of the function and appearance of the laboratory website as advice on what features might be developed to improve the services. According to the results of data processing from 44 respondents, the average SUS score was 59.32. Based on this score, the Acceptability Range category is still in the marginal range, meaning there are still several things that need to be corrected or improved so the website can help in the daily operational activities of the laboratory.
Keywords: laboratory; SUS; usability; user; website
Abstrak: Laboratorium Gambar dan Laboratorium Komputer Program Studi Desain Furnitur merupakan sarana penunjang praktikum di Politeknik Industri Furnitur dan Pengolahan Kayu. Pelayanan pada kedua laboratorium ini telah memanfaatkan website yang dapat diakses secara publik melalui alamat https://labdesainfurnitur.poltek-furnitur.ac.id/, pemanfaatan website bertujuan untuk memudahkan para pengguna dalam memperoleh informasi seputar kegiatan praktikum di laboratorium di setiap waktu. Adanya pemanfaatan teknologi informasi tersebut perlu dievaluasi untuk mengetahui kegunaan website bagi para pengguna serta sebagai masukan untuk pengelola laboratorium dalam mengembangkan website di masa mendatang. Evaluasi website laboratorium dilakukan dengan metode System Usability Scale (SUS). Melalui evaluasi kegunaan pada website laboratorium diharapkan diperoleh representasi pengalaman pengguna terhadap fungsi dan tampilan website laboratorium dan diperoleh saran fitur-fitur yang dapat dikembangkan untuk meningkatkan pelayanan di laboratorium. Data yang diperoleh sebanyak 44 responden menghasilkan skor SUS dengan rata-rata 59,32. Berdasarkan skor tersebut, rentang akseptabilitas website masih berada pada rentang marginal, sehingga masih ada beberapa fitur yang perlu ditingkatkan agar website dapat membantu kegiatan operasional laboratorium sehari-hari.
Kata kunci: kegunaan; laboratorium; pengguna; SUS; website
Abstract:Abstract: The widespread use of information and communication technology (ICT) has enhanced effectiveness and quality in management, research, and education at educational institutions. In this digital age, secondary schools…
ools are required to improve operational efficiency and educational strategies through the use of information technology. Therefore, the implementation of an enterprise architecture (EA) framework is crucial to ensure a strategic alignment between educational goals and technology. However, before implementing the framework, schools must evaluate various factors that influence the suitability and effectiveness of EA, including current technology needs, staff competencies, existing infrastructure conditions, and other factors. This study gathers and analyzes data from related studies, and the results indicate the importance of understanding EA principles to optimize academic and administrative processes. By considering variables in the selection of the EA framework, evaluating school readiness, and identifying existing challenges, this research aims to assist secondary schools in effectively implementing EA. The expected outcome of this research provides theoretical support for the adoption of EA, thus facilitating more efficient strategic and operational planning in secondary schools.
Keywords: enterprise architecture; framework; information and communication technology; secondary school.
Abstrak: Penggunaan teknologi informasi dan komunikasi (TIK) secara luas telah meningkatkan efektivitas dan kualitas dalam manajemen, penelitian, dan pendidikan di institusi pendidikan. Di era digital ini, sekolah menengah dituntut untuk meningkatkan efisiensi operasional dan strategi pendidikan melalui pemanfaatan teknologi informasi. Oleh karena itu, penerapan framework arsitektur enterprise (EA) menjadi penting untuk memastikan aliansi strategis antara tujuan pendidikan dan teknologi. Namun, sebelum penerapan framework dilakukan, sekolah harus mengevaluasi berbagai faktor yang mempengaruhi kesesuaian dan efektivitas EA, termasuk kebutuhan teknologi terkini, kompetensi staf, kondisi infrastruktur yang ada, dan faktor lainnya. Penelitian ini mengumpulkan dan menganalisis data dari studi terkait, hasilnya menunjukkan bahwa pentingnya pemahaman tentang prinsip-prinsip EA untuk mengoptimalkan proses akademik dan administratif. Dengan mempertimbangkan variabel-variabel dalam pemilihan framework EA, evaluasi kesiapan sekolah, dan identifikasi tantangan yang ada, penelitian ini bertujuan untuk membantu sekolah menengah dalam mengimplementasikan EA secara efektif. Diharapkan hasil dari penelitian ini memberikan kontribusi teoretis yang mendukung pengadopsian EA, sehingga memfasilitasi perencanaan strategis dan operasional yang lebih efisien di sekolah menengah.
Kata kunci:arsitektur enterprise; framework; sekolah menengah; teknologi informasi dan komunikasi.