Ir al contenido

Documat

Influence of critical thinking on LLM usage among Universitat d’Andorra students

  • Marc Bleda Bejar [2] ; Aleix Dorca Josa [2] ; Begonya Oliveras Prat [1]
    1. [1] Universitat Autònoma de Barcelona

      Universitat Autònoma de Barcelona

      Barcelona, España

    2. [2] Universitat d'Andorra
  • Localización: Interdisciplinary Journal of Didactics, ISSN-e 3045-5413, Nº. 1, 2024, págs. 33-54
  • Idioma: inglés
  • DOI: 10.14198/ijd.28095
  • Títulos paralelos:
    • Influencia del pensamiento crítico en el uso de los LLM entre los estudiantes de la Universitat d’Andorra
  • Enlaces
  • Resumen
    • español

      A medida que los modelos extensos de lenguaje continúan transformando las prácticas educativas, se vuelve esencial una evaluación exhaustiva de la influencia del pensamiento crítico en su uso. Este estudio examina cómo los estudiantes en los campos de la educación y la informática de la Universitat d’Andorra interactúan con los modelos extensos de lenguaje, centrándose especialmente en comprender sus experiencias de aprendizaje, estrategias de toma de decisiones y enfoques para resolver problemas. Utilizando métodos cualitativos y cuantitativos, la investigación analiza la frecuencia y los propósitos del uso de estas tecnologías, así como los procesos de pensamiento crítico que emplean los estudiantes para evaluar la fiabilidad y la relevancia del contenido generado por la inteligencia artificial. Los hallazgos revelan una gama de actitudes hacia los modelos extensos de lenguaje, que van desde la adopción entusiasta hasta el escepticismo. Si bien muchos estudiantes aprecian el apoyo académico inmediato y personalizado, la ayuda en la generación de contenido y la mejora de las habilidades de escritura que ofrecen estas herramientas, preocupan la precisión y los posibles sesgos de las salidas. En particular, los estudiantes demuestran niveles variables de activación de sus habilidades de pensamiento crítico cuando interactúan con los modelos extensos de lenguaje, algunos investigan activamente la confiabilidad de la información generada por la inteligencia artificial, mientras que otros exhiben una dependencia más pasiva de estas tecnologías. El estudio también destaca patrones de uso distintivos entre estudiantes de informática y educación. Los resultados contribuyen a una comprensión más profunda del comportamiento de los estudiantes en el contexto de la educación mejorada por la inteligencia artificial, proporcionando información valiosa para las instituciones educativas que buscan integrar estas herramientas en sus planes de estudios de manera efectiva. Además, esta investigación enfatiza la necesidad de mejorar las habilidades de pensamiento crítico dentro de los programas educativos para empoderar a los estudiantes a navegar por las complejidades de las capacidades y limitaciones de los modelos de lenguaje masivo.

    • English

      As large language models continue to reshape educational practices, a comprehensive evaluation of critical thinking’s influence on large language models’ usage becomes essential. This study examines how students in the fields of education and computer science at the Universitat d’Andorra interact with large language models, with a particular focus on understanding their learning experiences, decision-making strategies, and problem-solving approaches. Using qualitative and quantitative methods, the research analyzes the frequency and purposes of using these technologies, as well as the critical thinking processes students employ to assess the reliability and relevance of content generated by artificial intelligence. Findings reveal a spectrum of attitudes towards large language models, ranging from enthusiastic adoption to skepticism. While many students appreciate the immediate and personalized academic support, content generation assistance, and writing skill improvement offered by these tools, concerns about the accuracy and potential biases of the outputs are prevalent. Notably, students demonstrate varying levels of the activation of their critical thinking skills when engaging with large language models, with some actively investigate the reliability of artificial intelligence generated information, while others exhibit a more passive reliance on these technologies. The study also highlights distinct usage patterns between computer science and education students. The results contribute to a deeper understanding of student behavior in the context of artificial intelligence enhanced education, providing valuable insights for educational institutions aiming to integrate these tools into their curricula effectively. Furthermore, this research emphasizes the need to enhance critical thinking skills within educational programs to empower students to navigate the complexities of large language models capabilities and limitations.

  • Referencias bibliográficas
    • Alaeddine, M. and Tannoury, A. (2021). Artificial Intelligence in Music Composition. in Artificial Intelligence Applications and Innovations:...
    • Allueva, P. (2002). Conceptos básicos sobre metacognición. P. Allueva, Desarrollo de habilidades metacognitivas: programa de intervención,...
    • Baidoo-Anu, D. and Ansah, L. O. (2023). Education in the Era of Generative Artificial Intelligence (AI): Understanding the Potential Benefits...
    • Baskara, F. R., Puri, A. D. and Wardhani, A. R. (2023). ChatGPT and the Pedagogical Challenge: Unveiling the Impact on Early-Career Academics...
    • Bellman, R. E. (1978). Artificial intelligence: Can computers think? Boyd and Fraser Publishing Company
    • Bengio, Y., Ducharme, R. and Vincent, P. (2000). A Neural Probabilistic Language Model. Advances in neural information processing systems,...
    • Berg, G. and Plessis, E. (2023). ChatGPT and Generative AI: Possibilities for Its Contribution to Lesson Planning, Critical Thinking and Openness...
    • Bliss, J., Monk, M., Ogborn, J. and Black, P. J. (1983). Qualitative data analysis for educational research: A guide to uses of systemic networks....
    • Bloom, B. S., Engelhart, M. B., Furst, E. J., Hill, W. H. and Krathwohl, D. R. (1956). TAXONOMY OF EDUCATIONAL OBJECTIVES The Classification...
    • Carrera, F. X., Vaquero, E., Balsells, M. À. et al. (2011). Instrumento de evaluación de competencias digitales para adolescentes en riesgo...
    • Couso, D. and Márquez, C. (2023). Pensar críticament a l'aula de ciències. Activitats competencials per a estudiants de secundaria. Editorial...
    • Dunn, D. S., Halonen J. S. and Smith, R. A. (2009). Teaching Critical Thinking in Psychology: A Handbook of Best Practices. John Wiley &...
    • Ennis, R. H. (1987). A taxonomy of critical thinking dispositions and abilities. WH Freeman/Times Books/Henry Holt & Co
    • Facione, P. (1990). Critical Thinking: A Statement of Expert Consensus for Purposes of Educational Assessment and Instruction. California...
    • George-Reyes, C. E., López-Caudana, E. O. and Ramírez-Montoya, M. S. (2023). Research competencies in university students: Intertwining complex...
    • González, L. A. O., Baren, C. Y. O. and Zapata, E. J. P. (2023). El impacto de la inteligencia artificial en el ámbito educativo. Revista...
    • Halpern, D. F. (1998). Teaching Critical Thinking for Transfer Across Domains Dispositions, Skills, Structure Training, and Metacognitive...
    • Huschens, M., Briesch, M., Sobania, D. and Rothlauf, F. (2023). Do You Trust ChatGPT? - Perceived Credibility of Human and AI-Generated Content....
    • Irfan, M., Murray, L. and Ali, S. (2023). Insights into Student Perceptions: Investigating Artificial Intelligence (AI) Tool Usability in...
    • Izquierdo, M. and Aliberas, J. (2021). Pensamiento crítico y valores en las distopías del no futuro [sesión de simposio]. XI Congreso Internacional...
    • Jiao, W., Wang, W., Huang, J.-t., Wang, X. and Tu, Z. (2023). Is ChatGPT A Good Translator? Yes With GPT-4 As The Engine. arXiv (Cornell University)....
    • Kasneci, E., Seßler, K., Kuchemann, S. et al. (2023). ChatGPT for Good? On Opportunities and Challenges of Large Language Models for Education....
    • Kim, G. and Chun, S. Y. (2023). DATID-3D: Diversity-Preserved Domain Adaptation Using Text-to-Image Diffusion for 3D Generative Model. in...
    • Kurzweil, R., Richter, R., Kurzweil, R. and Schneider, M. L. (1990). The age of intelligent machines. MIT press Cambridge, 580.
    • Liu, B. L., Morales, D., Roser-Chinchilla, J. et al. (2023). Harnessing the Era of Artificial Intelligence in Higher Education: A Primer for...
    • Liu, M., Wei, Y., Wu, X., Zuo, W. and Zhang, L. (2023). A Survey on Leveraging Pre-trained Generative Adversarial Networks for Image Editing...
    • Lo, C. K. (2023). What Is the Impact of ChatGPT on Education? A Rapid Review of the Literature. Education Sciences, 13(4), 410. https://doi.org/10.3390/educsci13040410
    • Ningrum, S. et al. (2023). ChatGPT's Impact: The AI Revolution in EFL Writing. Borneo Engineering & Advanced Multidisciplinary International...
    • OpenAI, Chatgpt. (2022). [Online]. Available: https://chat.openai.com
    • Paul, R. and Elder, L. (2005). Una Guía Para los Educadores en los Estándares de Competencia para el Pensamiento Crítico. Estándares, Principios,...
    • Pimentel, D. (2022). Learning to evaluate scientific evidence in the age of digital information. eBook of Synopses, 43.
    • Sabzalieva, E. and Valentini, A. (2023). ChatGPT and Artificial Intelligence in higher education: Quick start guide.
    • Sandoval, W. A. and Millwood, K. A. (2005). The quality of students' use of evidence in written scientific explanations. Cognition and...
    • Singh, H., Tayarani-Najaran, M.-H. and Yaqoob, M. (2023). Exploring Computer Science Students' Perception of ChatGPT in Higher Education:...
    • Solís, M. E. C., Martínez, E. L., Degante, E. C., Godoy, E. P. and Martínez, Y. A. (2023). Inteligencia artificial generativa para fortalecer...
    • Susnjak, T., & McIntosh, T. R. (2024). ChatGPT: The end of online exam integrity? Education Sciences, 14(6), 656. https://doi.org/10.3390/educsci14060656
    • Tura, L. V., Bargalló, C. M., Prat, B. O. et al. (2023). Una propuesta para el diseño de actividades que desarrollen el pensamiento crítico...
    • UNESCO. (2019). BEIJING CONSENSUS on artificial intelligence and education.
    • Vaswani, A., Shazeer, N., Parmar, N. et al. (2017). Attention Is All You Need. Advances in neural information processing systems, 30. https://doi.org/10.48550/arXiv.1706.03762
    • Zhang, C., Zhang, C., Zheng, S. et al. (2023). A Complete Survey on Generative AI (AIGC): Is ChatGPT from GPT-4 to GPT-5 All You Need? arXiv...
Fundación Dialnet

Mi Documat

Opciones de artículo

Opciones de compartir

Opciones de entorno