"Era digital yang berkembang pesat telah menjadikan aplikasi mobile seperti Gojek sebagai solusi penting bagi kebutuhan masyarakat modern. Sebagai platform multi layanan, Gojek berkontribusi signifikan terhadap ekonomi Indonesia, mendukung Usaha Mikro, Kecil, dan Menengah (UMKM), meningkatkan inklusi keuangan, serta mendorong efisiensi mobilitas. Dengan lebih dari 6 juta ulasan pengguna di Play Store, data ini menjadi sumber informasi yang berharga untuk mengevaluasi kualitas layanan. Peningkatan jumlah pengguna dan layanan Gojek juga meningkatkan tuntutan terhadap kualitas aplikasinya, menjadikan ulasan pengguna penting untuk dianalisis guna memperoleh wawasan dan menilai kinerjanya. Penelitian ini bertujuan untuk melakukan analisis sentimen pada level topik terhadap ulasan pengguna aplikasi Gojek di Play Store. Melalui analitis visual (visual analytics), wawasan mendalam dari ulasan pengguna dapat dieksplorasi secara efektif dengan memanfaatkan Large Language Model (LLM). Pada penelitian ini digunakan model Gemma 2, yang merupakan pembaruan dari model Gemma yang dikembangkan oleh Google. Analisis sentimen untuk memahami persepsi pengguna dilakukan dengan menerapkan Gemma 2 yang telah melalui proses fine-tuning, di mana kinerjanya dibandingkan dengan beberapa pendekatan In-Context Learning (ICL) seperti zero-shot, one-shot, dan few-shot. Selanjutnya, pendeteksian topik dilakukan menggunakan BERTopic-HDBSCAN untuk mengidentifikasi topik utama pada ulasan. Terakhir, knowledge graph dibangun untuk memetakan hubungan antar entitas dalam ulasan melalui Neo4j LLM Knowledge Graph Builder. Hasil penelitian menunjukkan bahwa model Gemma 2 yang telah melaui proses fine-tuning memberikan performa terbaik dengan akurasi 0,955, sensitivitas 0,883, spesifisitas 0,976, presisi 0,915, dan f1-score 0,898, mengungguli pendekatan ICL. Berdasarkan analisis sentimen pada level topik, diperoleh bahwa 74,16% ulasan bersentimen negatif, dengan sebelas topik utama teridentifikasi, di mana hanya satu topik yang didominasi sentimen positif, sedangkan sisanya dominan negatif. Temuan ini dianalisis lebih lanjut melalui analitis visual untuk menghasilkan sejumlah rekomendasi bagi Gojek, antara lain peningkatan kualitas mitra driver, evaluasi struktur biaya layanan, perbaikan sistem GoPay, perluasan cakupan promo yang lebih merata dan jelas, peningkatan akurasi peta, serta pengembangan fitur positif lebih lanjut seperti kemudahan dan kecepatan layanan guna meningkatkan kepuasan dan loyalitas pengguna.
The rapidly evolving digital era has made mobile applications like Gojek an essential solution for the needs of modern society. As a multi-service platform, Gojek contributes significantly to Indonesia's economy by supporting micro, small and medium enterprises, enhancing financial inclusion, and promoting mobility efficiency. With more than 6 million user reviews on the Play Store, this data serves as a valuable source of information for evaluating service quality. The growing number of Gojek users and services has also increased the demand for higher application quality, making user reviews crucial to analyze in order to gain insights and assess performance. This study aims to conduct topic-level sentiment analysis on user reviews of the Gojek application on the Play Store. Through visual analytics, in-depth insights from user reviews can be effectively explored by leveraging Large Language Models (LLM). In this study, the Gemma 2 model, an updated version of the Gemma model developed by Google, is utilized. To understand user perception, sentiment analysis is conducted using the fine-tuned Gemma 2, with its performance compared to several In-Context Learning (ICL) approaches such as zero shot, one-shot, and few-shot. Subsequently, topic detection is performed using BERTopic-HDBSCAN to identify the main topics in the reviews. Lastly, a knowledge graph is constructed to map relationships between entities in the reviews using the Neo4j LLM Knowledge Graph Builder. The results show that the fine-tuned Gemma 2 model delivers the best performance with an accuracy of 0.955, sensitivity of 0.883, specificity of 0.976, precision of 0.915, and an F1-score of 0.898, outperforming the ICL approaches. Based on the topic-level sentiment analysis, it was found that 74.16% of the reviews carry negative sentiment, with eleven main topics identified. Only one topic is dominated by positive sentiment, while the rest are predominantly negative. These findings were further analyzed through visual analytics to generate several recommendations for Gojek, including improving the quality of driver partners, evaluating the service cost structure, enhancing the GoPay system, expanding promotional offerings with clearer terms, improving map accuracy, and further developing positive features such as ease and speed of service to increase user satisfaction and loyalty. "
Depok: Fakultas Matematika dan Ilmu Pengetahuan Alam Universitas Indonesia, 2025