BEYOND EFFECTIVENESS: INVESTIGATING STUDENT SATISFACTION WITH CHATBOT AI IN EFL ACADEMIC WRITING

Abstract

The integration of artificial intelligence into higher education has made chatbot AI such as ChatGPT, Gemini, and Perplexity common tools used by students in academic writing, yet research on student satisfaction toward their use in the Indonesian EFL context remains limited, as most previous studies emphasized effectiveness rather than affective and pedagogical factors. Therefore, this study focused on the satisfaction of English Language Education students at Ganesha University of Education (Undiksha) toward the use of chatbot AI as an assistive tool in academic writing, and on how specific aspects of chatbot based writing support, namely grammar assistance, idea development, feedback quality, and ease of use, influenced that satisfaction. This study employed a basic qualitative approach involving 10 students from the English Language Education Study Program at Universitas Pendidikan Ganesha (Undiksha). Participants were selected using purposive sampling with criterion-based selection based on their experience in using chatbot AI for academic writing. Data were collected through semi structured, in depth interviews with ten students selected using criterion-based selection. The interview recordings were transcribed verbatim and then analyzed using thematic analysis, resulting in three main themes, namely positive but conditional satisfaction, chatbot based writing support as the main source of satisfaction, and critical user control as the boundary of satisfaction. The findings showed that students were generally satisfied because chatbot AI helped them generate ideas, organize writing, correct grammar, obtain feedback, revise sentences, and find references quickly and practically. However, this satisfaction was conditional because students still needed to verify, revise, and control AI output that could be inaccurate or too general. This study concludes that chatbot AI facilitates academic writing and increases student satisfaction when it is used critically and responsibly as a supporting tool, rather than as a replacement for students’ own thinking and writing ability.

ABSTRAK

Integrasi kecerdasan buatan dalam pendidikan tinggi telah menjadikan chatbot AI seperti ChatGPT, Gemini, dan Perplexity sebagai alat bantu yang umum digunakan mahasiswa dalam penulisan akademik. Namun penelitian mengenai kepuasan mahasiswa terhadap penggunaannya dalam konteks EFL di Indonesia masih terbatas karena sebagian besar kajian sebelumnya lebih menekankan efektivitas daripada faktor afektif dan pedagogis. Oleh karena itu, penelitian ini berfokus pada kepuasan mahasiswa Pendidikan Bahasa Inggris di Universitas Pendidikan Ganesha (Undiksha) terhadap penggunaan chatbot AI sebagai alat bantu dalam penulisan akademik, serta bagaimana aspek spesifik dari dukungan penulisan berbasis chatbot, yaitu bantuan tata bahasa, pengembangan ide, kualitas umpan balik, dan kemudahan penggunaan, memengaruhi kepuasan tersebut. Penelitian ini menggunakan pendekatan kualitatif dasar dengan melibatkan 10 mahasiswa Program Studi Pendidikan Bahasa Inggris Universitas Pendidikan Ganesha (Undiksha). Partisipan dipilih menggunakan teknik purposive sampling dengan criterion-based selection berdasarkan pengalaman mereka dalam menggunakan chatbot AI untuk penulisan akademik. Data dikumpulkan melalui wawancara semi terstruktur dan mendalam terhadap sepuluh mahasiswa yang dipilih menggunakan purposive sampling berbasis kriteria. Rekaman wawancara ditranskripsi secara verbatim, kemudian dianalisis menggunakan analisis tematik hingga menghasilkan tiga tema utama, yaitu kepuasan positif namun bersyarat, dukungan penulisan berbasis chatbot sebagai sumber utama kepuasan, dan kontrol kritis pengguna sebagai batas kepuasan. Hasil penelitian menunjukkan bahwa mahasiswa secara umum merasa puas karena chatbot AI membantu mereka menghasilkan ide, menyusun tulisan, memperbaiki tata bahasa, memperoleh umpan balik, merevisi kalimat, dan mencari referensi secara cepat dan praktis. Namun, kepuasan tersebut bersifat bersyarat karena mahasiswa tetap perlu memverifikasi, merevisi, dan mengontrol keluaran AI yang dapat tidak akurat atau terlalu umum. Penelitian ini menyimpulkan bahwa chatbot AI memfasilitasi penulisan akademik dan meningkatkan kepuasan mahasiswa ketika digunakan secara kritis dan bertanggung jawab sebagai alat pendukung, bukan sebagai pengganti pemikiran dan kemampuan menulis mahasiswa.