Tích hợp chatbot trong giáo dục: những hiểu biết từ Mô hình Đánh giá Sự Hài lòng của Tương tác Chatbot - Con người (CHISM)

Jose Belda-Medina1, Vendula Kokošková2
1Department Filología Inglesa, Facultad de Letras, Campus de San Vicente, University of Alicante, San Vicente, Spain
2Institute of Applied Language Studies, University of West Bohemia, Plzen, Czech Republic

Tóm tắt

Những tiến bộ gần đây trong trí tuệ nhân tạo (AI) đã mở đường cho việc tích hợp chatbot dựa trên văn bản và chatbot hỗ trợ giọng nói như những gia sư ảo thích ứng trong giáo dục. Mặc dù việc sử dụng chatbot được hỗ trợ bởi AI trong việc học ngôn ngữ ngày càng tăng, nhưng vẫn còn thiếu các nghiên cứu tìm hiểu thái độ và nhận thức của giáo viên và sinh viên đối với những gia sư thông minh này. Nghiên cứu này nhằm so sánh một số khía cạnh ngôn ngữ và công nghệ của bốn Chatbot Tích hợp Ứng dụng (AICs) và xem xét nhận thức của các ứng viên giáo viên Tiếng Anh như Một Ngôn Ngữ Ngoại (EFL). Trong nghiên cứu phương pháp hỗn hợp dựa trên mẫu thuận tiện này, 237 sinh viên đại học từ Tây Ban Nha (n = 155) và Cộng hòa Séc (n = 82) đã tương tác với bốn AIC trong suốt một tháng và đánh giá chúng theo một thang điểm dựa trên Mô hình Đánh giá Sự Hài lòng của Tương tác Chatbot - Con người. Thang điểm này được thiết kế đặc biệt để đánh giá các tính năng ngôn ngữ và công nghệ khác nhau của AIC như khoảng thời gian phản hồi, tính nhất quán ngữ nghĩa, độ dài câu và giao diện người dùng. Dữ liệu định lượng và định tính được thu thập thông qua khảo sát trước và sau, dựa trên mô hình CHISM và báo cáo đánh giá của sinh viên. Dữ liệu định lượng được phân tích bằng phần mềm thống kê SPSS, trong khi dữ liệu định tính được xem xét bằng phần mềm QDA Miner, tập trung vào việc xác định các chủ đề lặp lại thông qua phân tích tần suất. Những phát hiện chỉ ra mức độ hài lòng vừa phải với AIC, cho thấy rằng việc cải tiến ở những lĩnh vực như thích ứng tốt hơn với nhu cầu của người học, tích hợp đa phương tiện tương tác và cải thiện công nghệ giọng nói là cần thiết để có một tương tác người dùng giống như con người hơn.

Từ khóa


Tài liệu tham khảo

Adamopoulou, E., & Moussiades, L. (2020). Chatbots: History, technology, and applications. Machine Learning with Applications, 2, 100006. https://doi.org/10.1016/j.mlwa.2020.100006 Ajisoko, P. (2020). The use of Duolingo apps to improve English vocabulary learning. International Journal of Emerging Technologies in Learning (iJET), 15(7), 149–155. https://doi.org/10.3991/ijet.v15i07.13229 Annamalai, N., Eltahir, M. E., Zyoud, S. H., Soundrarajan, D., Zakarneh, B., & Al Salhi, N. R. (2023). Exploring English language learning via Chabot: A case study from a self determination theory perspective. Computers and Education: Artificial Intelligence. https://doi.org/10.1016/j.caeai.2023.100148 Ayedoun, E., Hayashi, Y., & Seta, K. (2015). A conversational agent to encourage willingness to communicate in the context of English as a foreign language. Procedia Computer Science, 60, 1433–1442. https://doi.org/10.1016/j.procs.2015.08.219 Bao, M. (2019). Can home use of speech-enabled artificial intelligence mitigate foreign language anxiety–investigation of a concept. Arab World English Journal (AWEJ), 5, 28–40. https://doi.org/10.24093/awej/call5.3 Beattie, A., Edwards, A. P., & Edwards, C. (2020). A bot and a smile: Interpersonal impressions of chatbots and humans using emoji in computer-mediated communication. Communication Studies, 71(3), 409–427. https://doi.org/10.1080/10510974.2020.1725082 Belda-Medina, J., & Calvo-Ferrer, J. R. (2022). Using chatbots as AI conversational partners in language learning. Applied Sciences, 12(17), 8427. Chen, H.-L., Vicki Widarso, G., & Sutrisno, H. (2020). A chatbot for learning Chinese: Learning achievement and technology acceptance. Journal of Educational Computing Research, 58(6), 1161–1189. https://doi.org/10.1177/073563312092 Chocarro, R., Cortiñas, M., & Marcos-Matás, G. (2023). Teachers’ attitudes towards chatbots in education: A technology acceptance model approach considering the effect of social language, bot proactiveness, and users’ characteristics. Educational Studies. https://doi.org/10.1080/03055698.2020.1850426 Chuah, K.-M., & Kabilan, M. (2021). Teachers’ views on the use of Chatbots to support English language teaching in a mobile environment. International Journal of Emerging Technologies in Learning (iJET), 16(20), 223–237. https://doi.org/10.3991/ijet.v16i20.24917 Dokukina, I., & Gumanova, J. (2020). The rise of chatbots–new personal assistants in foreign language learning. Procedia Computer Science, 169, 542–546. https://doi.org/10.1016/j.procs.2020.02.212 El Shazly, R. (2021). Effects of artificial intelligence on English speaking anxiety and speaking performance: A case study. Expert Systems, 38(3), e12667. https://doi.org/10.1111/exsy.12667 Fryer, L., Coniam, D., Carpenter, R., & Lăpușneanu, D. (2020). Bots for language learning now: Current and future directions. Language Learning & Technology, 24(2), 8–22. Fryer, L., Nakao, K., & Thompson, A. (2019). Chatbot learning partners: Connecting learning experiences, interest and competence. Computers in Human Behavior, 93, 279–289. https://doi.org/10.1016/j.chb.2018.12.023 Gnewuch, U., Morana, S., Adam, M. T., & Maedche, A. (2022). Opposing effects of response time in human-chatbot interaction: The moderating role of prior experience. Business & Information Systems Engineering, 64(6), 773–791. https://doi.org/10.1007/s12599-022-00755-x Godwin-Jones, R. (2022). Chatbots in language learning: AI systems on the rise. In B. Arnbjörnsdóttir, B. Bédi, L. Bradley, K. Friðriksdóttir, H. Garðarsdóttir, S. Thouësny, & M. J. Whelpton (Eds.), Intelligent CALL, granular systems and learner data: short papers from EUROCALL (pp. 124–128). Research-publishing.net. https://doi.org/10.14705/rpnet.2022.61.1446 Gokturk, N. (2017). Mondly learning languages. Pronunciation in Second Language Learning and Teaching Proceedings, 8(1), 241–247. Hajizadeh, S., Salman, A. R., & Ebadi, S. (2023). Evaluating language learning applications from efl learners’ perspectives: The case of mondly. Research Square. https://doi.org/10.21203/rs.3.rs-3011332/v1 Hakim, R., & Rima, R. (2022). Chatting with AI Chatbots applications to improve English communication skill. Journal of English Language Studies., 7(1), 121–130. https://doi.org/10.30870/jels.v7i1.14327 Haristiani, N., Danuwijaya, A. A., Rifai, M. M., & Sarila, H. (2019). Gengobot: A chatbot-based grammar application on mobile instant messaging as language learning medium. Journal of Engineering Science and Technology, 14(6), 3158–3173. Haristiani, N., & Rifa’i, M. M. (2020). Combining chatbot and social media: Enhancing personal learning environment (PLE) in language learning. Indonesian Journal of Science and Technology, 5(3), 487–506. https://doi.org/10.17509/ijost.v5i3.28687 Hsu, M.-H., Chen, P.-S., & Yu, C.-S. (2021). Proposing a task-oriented chatbot system for EFL learners speaking practice. Interactive Learning Environments. https://doi.org/10.1080/10494820.2021.1960864 Huang, W., Hew, K. F., & Fryer, L. K. (2022). Chatbots for language learning—are they really useful? A systematic review of chatbot-supported language learning. Journal of Computer Assisted Learning, 38(1), 237–257. https://doi.org/10.1111/jcal.12610 Hwang, G.-J., & Chang, C.-Y. (2021). A review of opportunities and challenges of chatbots in education. Interactive Learning Environments, 31(7), 4099–4112. https://doi.org/10.1080/10494820.2021.1952615 Jang, J., Ko, Y., Shin, W. S., & Han, I. (2021). Augmented reality and virtual reality for learning: An examination using an extended technology acceptance model. IEEE Access, 9, 6798–6809. https://doi.org/10.1109/ACCESS.2020.3048708 Jeon, J. (2021). Exploring AI chatbot affordances in the EFL classroom: Young learners’ experiences and perspectives. Computer Assisted Language Learning. https://doi.org/10.1080/09588221.2021.2021241 Jeon, J., Lee, S., & Choi, S. (2023). A systematic review of research on speech-recognition chatbots for language learning: Implications for future directions in the era of large language models. Interactive Learning Environments. https://doi.org/10.1080/10494820.2023.2204343 Jung, S. K. (2019). Introduction to popular mobile chatbot platforms for English learning: Trends and issues. STEM Journal, 20(2), 67–90. https://doi.org/10.16875/stem.2019.20.2.67 Khang, A., Muthmainnah, M., Seraj, P. M. I., Al Yakin, A., & Obaid, A. J. (2023). AI-Aided teaching model in education 5.0. In A. Khang, V. Shah, & S. Rani (Eds.), Handbook of research on AI-based technologies and applications in the Era of the metaverse (pp. 83–104). IGI Global. Kharis, M., Schön, S., Hidayat, E., Ardiansyah, R., & Ebner, M. (2022). Mobile Gramabot: Development of a chatbot app for interactive German grammar learning. International Journal of Emerging Technologies in Learning, 17(14), 52–63. https://doi.org/10.3991/ijet.v17i14.31323 Kim, N.-Y. (2019). A study on the use of artificial intelligence chatbots for improving English grammar skills. Journal of Digital Convergence, 17(8), 37–46. https://doi.org/10.14400/JDC.2019.17.8.037 Kim, Nao-Young. (2020). Chatbots and language learning: effects of the use of AI chatbots for EFL learning. Eliva press. Kim, N.-Y., Cha, Y., & Kim, H.-S. (2019). Future English learning: Chatbots and artificial intelligence. Multimedia-Assisted Language Learning, 22(3), 32–53. Kohnke, L. (2023). L2 learners’ perceptions of a chatbot as a potential independent language learning tool. International Journal of Mobile Learning and Organisation, 17(1–2), 214–226. https://doi.org/10.1504/IJMLO.2023.10053355 Kukulska-Hulme, A., & Lee, H. (2020). Intelligent assistants in language learning: An analysis of features and limitations. In K.-M. Frederiksen, S. Larsen, L. Bradley, & S. Thouësny (Eds.), CALL for widening participation: Short papers from EUROCALL (pp. 172–176). Research-publishing.net. Li, Y., Chen, C.-Y., Yu, D., Davidson, S., Hou, R., Yuan, X., Tan, Y., Pham, D., & Yu, Z. (2022). Using Chatbots to Teach Languages. Proceedings of the Ninth ACM Conference on Learning@ Scale, 451–455. https://doi.org/10.1145/3491140.3528329 Nastasi, B. K., Hitchcock, J., Sarkar, S., Burkholder, G., Varjas, K., & Jayasena, A. (2007). Mixed methods in intervention research: Theory to adaptation. Journal of Mixed Methods Research, 1(2), 164–182. https://doi.org/10.1177/155868980629 Panesar, K. (2020). Conversational artificial intelligence-demystifying statistical vs linguistic NLP solutions. Journal of Computer-Assisted Linguistic Research, 4, 47–79. https://doi.org/10.4995/jclr.2020.12932 Petrović, J., & Jovanović, M. (2021). The role of chatbots in foreign language learning: The present situation and the future outlook. Artificial Intelligence: Theory and Applications, 2, 313–330. https://doi.org/10.1007/978-3-030-72711-6_17 Pham, X. L., Pham, T., Nguyen, Q. M., Nguyen, T. H., & Cao, T. T. H. (2018). Chatbot as an intelligent personal assistant for mobile language learning. Proceedings of the 2018 2nd International Conference on Education and E-Learning, 16–21. https://doi.org/10.1145/3291078.3291115 Pin-Chuan Lin, M., & Chang, D. (2020). Enhancing post-secondary writers’ writing skills with a chatbot: A mixed-method classroom study. Journal of Educational Technology & Society, 23(1), 78–92. Rapp, A., Curti, L., & Boldi, A. (2021). The human side of human-chatbot interaction: A systematic literature review of ten years of research on text-based chatbots. International Journal of Human-Computer Studies, 151, 102630. https://doi.org/10.1016/j.ijhcs.2021.102630 Skjuve, M., Følstad, A., Fostervold, K. I., & Brandtzaeg, P. B. (2021). My chatbot companion-a study of human-chatbot relationships. International Journal of Human-Computer Studies, 149, 102601. https://doi.org/10.1016/j.ijhcs.2021.102601 Vera, F. (2023). Integrating Artificial Intelligence (AI) in the EFL classroom: Benefits and challenges. Transformar, 4(2), 66–77. Yang, J. (2022). Perceptions of preservice teachers on AI chatbots in English education. International Journal of Internet, Broadcasting and Communication, 14(1), 44–52. https://doi.org/10.7236/IJIBC.2022.14.1.44 Zhang, R., Zou, D., & Cheng, G. (2023). A review of chatbot-assisted learning: Pedagogical approaches, implementations, factors leading to effectiveness, theories, and future directions. Interactive Learning Environments. https://doi.org/10.1080/10494820.2023.2202704