Evaluación de las estrategias de aprendizaje en la impartición de un nano-mooc (nooc) introductorio al desarrollo de competencias digitales e informacionales para docentes de la ciudad de quito

Resumen

INTRODUCCIÓN En las grandes plataformas tecnológicas se lanzan numerosas ofertas de aprendizaje en línea que se catalogan como MOOC, no obstante, muchas de ellas se sustentan principalmente en el marketing digital más que en una propuesta metodológica para conseguir resultados de aprendizaje, lo cual va en desmedro de la credibilidad de esta nueva propuesta educativa. Por ello se considera necesario abordar esta investigación bajo un análisis actualizado y crítico sobre los MOOC, como un concepto disruptivo desde una perspectiva pedagógica, focalizando la atención en la efectividad de las estrategias de aprendizaje que se utilizan para su impartición. Una aspiración personal del investigador ha sido contribuir a mejorar las experiencias de aprendizaje que viven los educandos en los distintos niveles de formación, desde niños hasta profesionales, para que estas experiencias sean efectivas, es decir, satisfagan necesidades específicas de aprendizaje, y también para que sean gratificantes para los estudiantes, potenciando así su capacidad y despertando su motivación e interés por el aprendizaje a lo largo de la vida. El objetivo central de esta investigación es evaluar la efectividad de las estrategias de aprendizaje utilizadas en un nano MOOC (NOOC) introductorio al desarrollo de competencias digitales e informacionales, en docentes de Quito. El enfoque metodológico del estudio es cuantitativo donde se manipuló la variable independiente; las estrategias de aprendizaje utilizadas en la impartición del nano MOOC (NOOC) estableciendo un de control y dos grupos cuasiexperimentales, a través de una muestra no probabilística. DESARROLLO TEÓRICO La primera categorización en cMOOC, cursos basados en el conectivismo, y xMOOC que se caracterizan por un aprendizaje lineal basado en contenido (Cabero y Llorente, 2014). La clasificación propuesta por Lane (2012) se basa en los procesos de aprendizaje, y desglosa a los xMOOC en dos categorías, los MOOC basados en contenidos y los tMOOC que se centran en la adquisición de habilidades mediante la realización de tareas o actividades. Una de las taxonomías más difundidas es la propuesta de Clark (2013), con ocho tipos de MOOC: TransferMOOC, se asimilan a la descripción de los xMOOC. MadeMOOC, son innovadores en el uso del video, trabajo colaborativo y varios niveles de experiencias interactivas, adquirir habilidades. SynchMOOC (MOOC sincrónicos) tienen fecha de inicio fija, plazos fijos para tareas y evaluaciones y fecha de finalización. AsynchMOOC (MOOC asincrónicos) no cuentan con fechas fijas, tienen plazos flexibles para la entrega de actividades y evaluaciones. AdaptiveMOOC (MOOC adaptativos), experiencias de aprendizaje personalizadas. GroupMOOC (MOOC grupales), pequeños grupos de alumnos, trabajan en colaboración para favorecer la retención de estudiantes. ConnectivistMOOC (MOOC conectivistas) que no tienen contenido predefinido, y los estudiantes crean su propia trayectoria en lugar de seguir un proceso lineal. MiniMOOC o como los señala Coakley et al. (2017) Micro NOOC, con experiencias intensivas que duran horas o días, adecuados para el dominio de tareas específicas. Los NOOC (Nano Open Online Course), comparten la filosofía de los MOOC así como su modelo educativo online y abierto (Junta de Andalucía, 2018). Formación especializada y exprés, en pocas horas permite obtener habilidades para desarrollar una competencia. Algunos tienen una duración de 1 a 3 horas y máximo 20, abordan directamente el tema de aprendizaje sin pasar por temas introductorios. Uno de los retos de los diseñadores e instructores de MOOC, es atender a las necesidades de los estudiantes como contrapartida a las altas tasas de abandono. Adamopoulos (2013) realizó un estudio cuantitativo con datos generados por los usuarios, y estimó el efecto relativo que tienen en la permanencia de alumnos (características estudiante, curso, universidad, plataforma). Según Álvarez et al. (2018), los recursos provistos para la comunicación asíncrona en los MOOC son importantes ya que facilitan espacios para que los participantes puedan expresar las propias ideas y contribuyen a los procesos reflexivos sobre temas específicos, siendo recomendable fomentar aún más la participación en estos espacios. La innovación del diseño instruccional de los MOOC es un factor relevante para la motivación de los participantes y sus resultados. El diseño debe interrelacionar componentes no tradicionales, epistemológicos y de evaluación con contenido como videos, lecturas y otros recursos educativos abiertos (M. Ramírez, 2014). Zheng et al. (2015), desarrolló una investigación para dar respuesta a la pregunta: ¿si los estudiantes no están motivados por la finalización de los cursos, qué los motiva? Satisfacer las necesidades actuales, preparación para el futuro, satisfacer la curiosidad, conectarse con la gente. Los resultados estadísticos sobre la efectividad de las actividades de aprendizaje en función del conocimiento adquirido por los participantes muestran que el grupo B (cuasiexperimental) obtuvo 3 actividades de aprendizaje con elevados niveles de efectividad y que aportaron a todas las fases/estilos de aprendizaje: activa, reflexiva, teórica y pragmática. El grupo C (cuasiexperimental) obtuvo 2 actividades de aprendizaje con elevados niveles de efectividad, que aportaron a las fases/estilos teórica y pragmática. El grupo A (control) solamente obtuvo 2 actividades de aprendizaje con elevados niveles de efectividad que aportaron a la fase/estilo de aprendizaje teórico. La efectividad de los contenidos para el aprendizaje en función del total de insignias obtenidas es del 100% para los grupos cuasiexperimentales (B y C) y del 89% para el grupo A (control). CONCLUSIÓN Una de las principales conclusiones que podemos extraer al respecto es que el aprendizaje en línea del nano MOOC, está fuertemente condicionado a las estrategias del diseño instruccional, la presentación de los contenidos, la interacción de los participantes en el curso y la evaluación y reconocimiento de sus propios aprendizajes. La principal contribución metodológica de la presente investigación al diseño instruccional de los MOOC, es la aplicación de los estilos de aprendizaje con base en el modelo de Kolb (1984) para la educación virtual, lo cual demandó un esfuerzo particular para atomizar los contenidos en cápsulas de aprendizaje que aborden la esencia de los temas con el nivel de profundidad y claridad necesarios a fin de facilitar el autoaprendizaje de los participantes y también para el diseño de actividades de aprendizaje considerando las preferencias de los 4 estilos: activos, reflexivos, teóricos y pragmáticos. Estos resultados muestran el limitado aporte a la diversidad de estilos de aprendizaje que brindan los cursos que únicamente se basan en actividades relacionadas con mirar videos y responder cuestionarios de evaluación, ya que enfatizan el estilo teórico pero no contribuyen a los estilos activos, reflexivos y pragmáticos, limitando el aprendizaje significativo de los estudiantes. REFERENCIAS BIBLIOGRÁFICAS Abramovich, S., Schunn, C., & Higashi, R. (2013). Are badges useful in education?: It depends upon the type of badge and expertise of learner. Educational Technology Research and Development, 61. https://doi.org/10.1007/s11423-013-9289-2 Acosta, E. S., & Otero, J. J. E. (2014). Clasificación de medios de evaluación en los MOOC. Edutec. Revista Electrónica de Tecnología Educativa, 0(48). http://www.edutec.es/revista/index.php/edutec-e/article/view/137 Adamopoulos, P. (2013). What Makes a Great MOOC? An Interdisciplinary Analysis of Student Retention in Online Courses. 34th International Conference on Information Systems: ICIS 2013. https://experts.umn.edu/en/publications/what-makes-a-great-mooc-an-interdisciplinary-analysis-of-student- Admiraal, W., Huisman, B., & Ven, M. V. de. (2014). Self- and Peer Assessment in Massive Open Online Courses. International Journal of Higher Education, 3(3), 119. https://doi.org/10.5430/ijhe.v3n3p119 Aguaded, I. (2013). The MOOC Revolution: A new form of education from the technological paradigm? Comunicar, 41, 7-8. https://doi.org/10.3916/C41-2013-a1 Ahumada Gómez, O. D., & De la Hoz Gutiérrez, N. (2019). MOOC y su efecto en el desarrollo del pensamiento crítico de los estudiantes de la básica secundaria en el área de lengua castellana [Thesis, Universidad de la Costa]. https://repositorio.cuc.edu.co/handle/11323/5873 Alario-Hoyos, C., Pérez-Sanagustín, M., Morales Chan, M., Delgado-Kloos, C., Hernández-Rizzardini, R., Román, M., Ramirez-Gonzalez, G., Luna, T., Jerez, O., Guetl, C., Teixeira, A., Maldonado, J., Amado-Salvatierra, H., Meléndez, A., & Solarte, M. (2018, octubre 11). MOOC-Maker: Tres Años Construyendo Capacidades de Gestión de MOOCs en Latinoamérica. Alonso, C. M., Gallego, D. J., & Honey, P. (1994). Los estilos de aprendizaje. Procedimientos de diagnóstico y mejora. Mensajero. Altrabsheh, N., Cocea, M., & Fallahkhair, S. (2015). Predicting students¿ emotions using machine learning techniques. Lecture Notes in Computer Science (including subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics), 9112, 537-540. Scopus. https://doi.org/10.1007/978-3-319-19773-9_56 Álvarez, L. S. J., Ortiz, C., Maldonado, J. C., Mora, E. D. C., Jaramillo, N. del C. F., & Miguitama, P. G. Q. (2018). Aprendizaje introductorio sobre la ciencia del suelo a través de un curso MOOC. Ciencia & Tecnología Agropecuaria, 19(3), 457-469. https://doi.org/10.21930/rcta.vol19_num3_art:649 Alvarez, W. (2008). La Naturaleza De La Investigación. Biosfera. https://isbn.cloud/9789802101733/la-naturaleza-de-la-investigacion/ Ander-Egg, E. (1995). Tecnicas de Investigacion Social. Anderson, A., Huttenlocher, D., Kleinberg, J., & Leskovec, J. (2014). Engaging with massive online courses. 687-697. Scopus. https://doi.org/10.1145/2566486.2568042 Arias, F. (2006). El Proyecto de la Investigación: Introducción a la Metodología Científica. Area Moreira, M. (2019). La enseñanza universitaria digital: Fundamentos pedagógicos y tendencias actuales. https://riull.ull.es/xmlui/handle/915/13247 Asensio-Pérez, J. I., Dimitriadis, Y., Pozzi, F., Hernández-Leo, D., Prieto, L. P., Persico, D., & Villagrá-Sobrino, S. L. (2017). Towards teaching as design: Exploring the interplay between full-lifecycle learning design tooling and Teacher Professional Development. Computers & Education, 114, 92-116. https://doi.org/10.1016/j.compedu.2017.06.011 Attwood, R. (2009, septiembre 24). Get it out in the open. Times Higher Education (THE). https://www.timeshighereducation.com/features/get-it-out-in-the-open/408300.article Ávila, H. (1999). Introducción a la metodología de la investigación. Biblioteca virtual de derecho, economía, ciencias sociales y tesis doctorales. https://www.eumed.net/libros-gratis/2006c/203/ Baldomero, M., Vázquez-Cano, E., & Belando-Montoro, M. (2018). Design of a Model for the Assessment of MOOC Quality Using Fuzzy Logic [Diseño de un modelo de evaluación de la calidad de los cursos MOOC mediante Lógica difusa]. Revista Electronica de Investigacion Educativa, 20(4), 73-85. https://doi.org/10.24320/redie.2018.20.4.1663 Bartolomé, A., & Steffens, K. (2015). Are MOOC Promising Learning Environments? (Preprint copy). Comunicar, 44. https://doi.org/10.3916/C44-2015-10 Berenson, M. L., Levine, D. M., Domínguez R, & Ariadne Catalina. (1996). Estadística básica en administración: Conceptos y aplicaciones. Prentice Hall Hispanoamericana. BIS. (2013). The Maturing of the MOOC: Literature Review of Massive Open Online Courses and other Forms of Online Distance Learning [Working Paper]. Department for Business, Innovation and Skills [untranslated]. https://repositorio.minedu.gob.pe/handle/20.500.12799/3146 Bishop, J., Verleger, M., Aeronautical, E.-R., & Beach, D. (2013). The Flipped Classroom: A Survey of the Research. https://doi.org/10.18260/1-2--22585 Bogarín, A., Cerezo, R., & Romero, C. (2018). A survey on educational process mining. WIREs Data Mining and Knowledge Discovery, 8(1), e1230. https://doi.org/10.1002/widm.1230 Bolivar, A. (2008). Didáctica y currículum: De la modernidad a la postmodernidad. Bolívar, A. (2012). O currículo redesenhado. Revista Pátio Ensino Médio, Profissional e Tecnológico - No14. https://loja.grupoa.com.br/bibliotecauniversitaria/patio-ens-medio-profissional-e-tec-n14201221794375140912-p1004012 Breiman, L., & Schapire, E. (2001). Random forests. Machine Learning, 5-32. Brusilovsky, P., & Millán, E. (2007). User Models for Adaptive Hypermedia and Adaptive Educational Systems. En P. Brusilovsky, A. Kobsa, & W. Nejdl (Eds.), The Adaptive Web: Methods and Strategies of Web Personalization (pp. 3-53). Springer. https://doi.org/10.1007/978-3-540-72079-9_1 Buendía, L., Hernández, F., & Colás, M. P. (1997). Métodos de investigación en psicopedagogía. McGraw-Hill Interamericana de España. https://dialnet.unirioja.es/servlet/libro?codigo=127059 Cabero, J., & Llorente, M. del C. (2014). Las tipologías de MOOC: Su diseño e implicaciones educativas. Profesorado: Revista de curriculum y formación del profesorado, 18(1), 13-26. Campo, A., & Oviedo, H. C. (2008). Propiedades Psicométricas de una Escala: La Consistencia Interna. Revista de Salud Pública, 10(5), 831-839. Cancio, L. P., & Bergues, M. M. (2013). Usabilidad de los sitios Web, los métodos y las técnicas para la evaluación. Revista Cubana de Información en Ciencias de la Salud, 24(2). http://www.acimed.sld.cu/index.php/acimed/article/view/405 Carroll, J. (2012). The Neighborhood in the Internet: Design research projects in community informatics. https://doi.org/10.4324/9780203093573 Castaño-Garrido, C., Maiz Olazabalaga, I., & Garay Ruiz, U. (2015). Social networks and cooperative learning in a MOOC [Redes sociales y aprendizaje cooperativo en un MOOC]. Revista Complutense de Educacion, 26, 119-139. https://doi.org/10.5209/rev_RCED.2015.v26.46328 Cat, J. (2001). On Understanding: Maxwell on the Methods of Illustration and Scientific Metaphor. Studies in History and Philosophy of Science Part B: Studies in History and Philosophy of Modern Physics, 32(3), 395-441. https://doi.org/10.1016/S1355-2198(01)00018-1 Cegarra, J. (2011, diciembre 8). Metodología de la investigación científica y tecnológica. casadellibro. https://www.casadellibro.com/ebook-metodologia-de-la-investigacion-cientifica-y-tecnologica-ebook/9788499690278/1949691 Chang, J.-W., & Wei, H.-Y. (2016). Exploring Engaging Gamification Mechanics in Massive Online Open Courses. Journal of Educational Technology & Society, 19(2), 177-203. Chaplot, D. S., Rhim, E., & Kim, J. (s. f.). Predicting Student Attrition in MOOCs using Sentiment Analysis and Neural Networks. 7. Chiappe-Laverde, A., Hine, N., & Martínez-Silva, J.-A. (2015). Literature and Practice: A Critical Review of MOOCs. Comunicar, 22(44), 09-18. https://doi.org/10.3916/C44-2015-01 Chiu, T. K. F., & Hew, T. K. F. (2018). Factors influencing peer learning and performance in MOOC asynchronous online discussion forum. Australasian Journal of Educational Technology, 34(4), 16-28. https://doi.org/10.14742/ajet.3240 Chorianopoulos, K. (2018). A taxonomy of asynchronous instructional video styles. International Review of Research in Open and Distance Learning, 19(1), 294-311. Scopus. https://doi.org/10.19173/irrodl.v19i1.2920 Clow, D. (2013). MOOCs and the funnel of participation. Proceedings of the Third International Conference on Learning Analytics and Knowledge, 185-189. https://doi.org/10.1145/2460296.2460332 Coakley, D., Garvey, R., & O¿Neill, Í. (2017). Micro-learning¿Adopting Digital Pedagogies to Facilitate Technology-Enhanced Teaching and Learning for CPD. En G. B. Teh & S. C. Choy (Eds.), Empowering 21st Century Learners Through Holistic and Enterprising Learning (pp. 237-242). Springer. https://doi.org/10.1007/978-981-10-4241-6_24 Codina, L. (2003). La web semántica: Una visión crítica. El profesional de la información, ISSN 1386-6710, Vol. 12, No 2, 2003, pags. 149-152, 12. https://doi.org/10.1076/epri.12.2.149.15480 Coetzee, D., Fox, A., Hearst, M. A., & Hartmann, B. (2014). Should your MOOC forum use a reputation system? Proceedings of the 17th ACM conference on Computer supported cooperative work & social computing, 1176-1187. https://doi.org/10.1145/2531602.2531657 Conole, G. (2016). MOOCs as disruptive technologies: Strategies for enhancing the learner experience and quality of MOOCs. RED: Revista de Educación a Distancia, Extra 50, 1-18. Cook, J. (2010). Mobile Learner Generated Contexts (pp. 113-125). https://doi.org/10.1007/978-3-531-92133-4_8 Cordoba, A. L., Sánchez, J. M. C., & Fernández, S. F. (2002). Estadística Descriptiva. https://dialnet.unirioja.es/servlet/libro?codigo=301886 Cormier, D., & Siemens, G. (2010). The Open Course: Through the Open Door--Open Courses as Research, Learning, and Engagement. EDUCAUSE Review, 45(4), 30. Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16, 297-334. https://doi.org/10.1007/BF02310555 Davis, D., Chen, G., Hauff, C., & Houben, G.-J. (2016). Gauging MOOC Learners¿ Adherence to the Designed Learning Path. 8. De Galindo, M. D. J. B. H., & Ramírez-Montoya, M. S. (2019). Innovation in the instructional design of open mass courses (MOOCs) to develop entrepreneurship competencies in energy sustainability. Education in the Knowledge Society, 20. Scopus. https://doi.org/10.14201/eks2019_20_a5 de Irala, J., Martínez-González, M. Á., & Guillén Grima, F. (2001). ¿Qué es una variable de confusión? Medicina Clínica, 117(10), 377-385. https://doi.org/10.1016/S0025-7753(01)72121-5 Dillenbourg, P., Fox, A., Kirchner, C., Mitchell, J., & Wirsing, M. (2014). Massive Open Online Courses: Current State and Perspectives (Dagstuhl Perspectives Workshop 14112). Dagstuhl Manifestos, 4(1), 1-27. https://doi.org/10.4230/DagMan.4.1.1 Domínguez, A., Saenz-de-Navarrete, J., de-Marcos, L., Fernández-Sanz, L., Pagés, C., & Martínez-Herráiz, J.-J. (2013). Gamifying learning experiences: Practical implications and outcomes. Computers & Education, 63, 380-392. https://doi.org/10.1016/j.compedu.2012.12.020 Downes, S. (2011). Free Learning Essays on Open Educational Resources and Copyright. 249. El-Halees, A. (2011). Mining opinions in user-generated contents to improve course evaluation. Communications in Computer and Information Science, 180 CCIS(PART 2), 107-115. Scopus. https://doi.org/10.1007/978-3-642-22191-0_9 Eraut, M. (2000). Non-formal learning and tacit knowledge in professional work. British Journal of Educational Psychology, 70(1), 113-136. https://doi.org/10.1348/000709900158001 Farhangmehr, M., Gonçalves, P., & Sarmento, M. (2016). Predicting entrepreneurial motivation among university students: The role of entrepreneurship education. Education + Training, 58. https://doi.org/10.1108/ET-01-2016-0019 Farrán, M. A., & Pérez, M. (2017). Diseño de un MOOC: Química Orgánica básica para el curso de Bioquímica del grado de Química. Trabajos Fin de Carrera (TFG y TFM). El camino de la profesionalización: actas VIII Jornadas de Redes de Investigación e Innovación Docente de la UNED, 2017, ISBN 978-84-697-4184-9, págs. 43-47, 43-47. https://dialnet.unirioja.es/servlet/articulo?codigo=7126695 Fidalgo-Blanco, Á., Sein-Echaluce, M. L., & García Peñalvo, F. J. (2013). MOOC cooperativo. Una integración entre cMOOC y xMOOC Cooperative MOOC. An integration between cMOOC and xMOOC. Fundación General de la Universidad Politécnica de Madrid. https://gredos.usal.es/handle/10366/122486 Fontana, R. P., Milligan, C., Littlejohn, A., & Margaryan, A. (2015). Measuring self-regulated learning in the workplace. International Journal of Training and Development, 19(1), 32-52. https://doi.org/10.1111/ijtd.12046 Fournier, H., Kop, R., & Sitlia, H. (2011). The value of learning analytics to networked learning on a personal learning environment. 104-109. https://doi.org/10.1145/2090116.2090131 Galiamova, K., Pavlov, Y., Smirnova, E., Zakharov, M., & Zverev, A. (2018). PSYCHOLOGICAL ADAPTATION MECHANISM OF THE HIGHER EDUCATION ENGINEERING STUDENTS: ARTIFICIAL CONVERSATIONAL ENTITY USAGE FOR HELP. https://doi.org/10.21125/INTED.2018.0667 Garreta-Domingo, M., Hernández-Leo, D., & Sloep, P. B. (2018). Evaluation to support learning design: Lessons learned in a teacher training MOOC. Australasian Journal of Educational Technology, 34(2), 56-77. https://doi.org/10.14742/ajet.3768 Gerace, W. (2001). Problem Solving and Conceptual Understanding Documents. https://www.compadre.org/repository/document/ServeFile.cfm?ID=4375&DocID=1028 Gibson, D., Ostashewski, N., Flintoff, K., Grant, S., & Knight, E. (2013). Digital badges in education. Educ Inf Technol, 20, 1-8. https://doi.org/10.1007/s10639-013-9291-7 Gooch, D., Vasalou, A., & Benton, L. (2015, julio 6). Exploring the use of a Gamification Platform to Support Students with Dyslexia. https://doi.org/10.1109/IISA.2015.7388001 Grau, J., & Minguillón, J. (2011). Redefining dropping out in online higher education: A case study from the UOC. https://doi.org/10.1145/2090116.2090125 Graván, P. R., & Rey, J. M. M. (2014). Educational innovation experience with MOOC¿s course: QR codes applied to teaching [Experiencia de innovación educativa con curso MOOC: Los códigos qr aplicados a la enseñanza]. Profesorado, 18(1), 113-136. Guerrero, C. (2015). UMUMOOC Una propuesta de indicadores de calidad pedagógica para la realización de cursos MOOC. Campus Virtuales, 4(2), 70-76. Guo, P., Kim, J., & Rubin, R. (2014). How video production affects student engagement: An empirical study of MOOC videos. 41-50. https://doi.org/10.1145/2556325.2566239 Hamari, J. (2017). Do badges increase user activity? A field experiment on the effects of gamification. Computers in Human Behavior, 71, 469-478. https://doi.org/10.1016/j.chb.2015.03.036 Heller, R. F. (2014). Learning by MOOC or by crook. Medical Journal of Australia, 200(4), 192-193. https://doi.org/10.5694/mja14.00129 Hernández, E., Romero, S., & Ramírez, M. S. (2015). Evaluación de competencias digitales didácticas en cursos masivos abiertos: Contribución al movimiento latinoamericano. Comunicar: Revista científica iberoamericana de comunicación y educación, 44, 81-90. Hernández, R. (2007, mayo 7). Fundamentos de la metodología de la investigación. casadellibro. https://www.casadellibro.com/libro-fundamentos-de-la-metodologia-de-la-investigacion/9788448160593/1138059 Honey, P., & Mumford, A. (1986). The Manual of Learning Styles. P. Honey. Huang, J., Dasgupta, A., Ghosh, A., Manning, J., & Sanders, M. (2014). Superposter behavior in MOOC forums. Proceedings of the first ACM conference on Learning @ scale conference, 117-126. https://doi.org/10.1145/2556325.2566249 Hurley, S. (2008). The shared circuits model (SCM): How control, mirroring, and simulation can enable imitation, deliberation, and mindreading. The Behavioral and brain sciences, 31, 1-22; discussion 22. https://doi.org/10.1017/S0140525X07003123 Hurtado de Barrera, J. (2000). El proyecto de investigación: Metodología de la investigación holística. SERBIULA (sistema Librum 2.0). Ibáñez Moreno, A., & Traxler, J. (2016). MALL-based MOOCs for language teachers: Challenges and opportunities [MOOC basados en tecnología móviles para profesores de lenguas: Desafíos y oportunidades]. Porta Linguarum, 2016(MONOGRAFICO1), 73-85. INTEF. (2017). NOOC - educaLAB. http://educalab.es/intef/formacion/formacion-en-red/nooc Issa, T., Smyrnova-Trybulska, E., Ogrodzka-Mazur, E., Szafra¿ska, A., Morze, N., Makhachashvili, R., Noskova, T., Pavlova, T., Yakovleva, O., & Issa, T. (2016, diciembre 1). MOOCS ¿ THEORETICAL AND PRACTICAL ASPECTS: COMPARISON OF SELECTED RESEARCH RESULTS: POLAND, RUSSIA, UKRAINE, AND AUSTRALIA. Jovanovi¿, J., Gaševi¿, D., Pardo, A., Mirriahi, N., & Dawson, S. (2019). An analytics-based framework to support teaching and learning in a flipped classroom. Learning Analytics in the Classroom: Translating Learning Analytics Research for Teachers, 2019, ISBN 9780815362128, Págs. 131-151, 131-151. https://dialnet.unirioja.es/servlet/articulo?codigo=7143031 Karlsson, N., & Godhe, A.-L. (2016). Creating a Community Rather Than a Course¿Possibilities and Dilemmas in an MOOC. Education Sciences, 6(2), 18. https://doi.org/10.3390/educsci6020018 Kizilcec, R. F., Piech, C., & Schneider, E. (2013). Deconstructing disengagement: Analyzing learner subpopulations in massive open online courses. Proceedings of the Third International Conference on Learning Analytics and Knowledge, 170-179. https://doi.org/10.1145/2460296.2460330 Klemke, R., Eradze, M., & Antonaci, A. (2018). The flipped MOOC: Using gamification and learning analytics in MOOC design¿A conceptual approach. Education Sciences, 8(1). https://doi.org/10.3390/educsci8010025 Kloos, C. D., Muñoz-Merino, P. J., Alario-Hoyos, C., Ayres, I. E., & Fernández-Panadero, C. (2015). Mixing and blending MOOC Technologies with face-to-face pedagogies. 2015 IEEE Global Engineering Education Conference (EDUCON), 967-971. https://doi.org/10.1109/EDUCON.2015.7096090 Klopfenstein, L. C., Delpriori, S., Malatini, S., & Bogliolo, A. (2017). The Rise of Bots: A Survey of Conversational Interfaces, Patterns, and Paradigms. Proceedings of the 2017 Conference on Designing Interactive Systems, 555-565. https://doi.org/10.1145/3064663.3064672 Knox, J., Bayne, S., Ross, J. L., Macleod, H., & Sinclair, C. (2012). MOOC pedagogy: The challenges of developing for Coursera. Undefined. /paper/MOOC-pedagogy%3A-The-challenges-of-developing-for-Knox-Bayne/14d8cc0e23329aa1b255aaa1b185acb1f47e5e42 Kolb, D. (1984). Experiential learning: Experience as the source of learning and development. Prentice Hall. Kopp, M., & Ebner, M. (2017). Certification of MOOCs. Advantages, challenges and practical experiences [La certificación de los MOOC. Ventajas, desafíos y experiencias prácticas]. Revista Espanola de Pedagogia, 75(266), 83-100. https://doi.org/10.22550/REP75-1-2017-05 Korsunsky, B., & Li, C. (2017). By hook or by MOOC: Lessons learned and the road ahead. Physics Teacher, 55(3), 146-148. https://doi.org/10.1119/1.4976655 Kurhila, J., & Vihavainen, A. (2015). A purposeful MOOC to alleviate insufficient cs education in Finnish schools. ACM Transactions on Computinig Education, 15(2). https://doi.org/10.1145/2716314 Ledesma, R. (2004). AlphaCI: Un programa de cálculo de intervalos de confianza para el coeficiente alfa de Cronbach. Psico-USF (Impresso), 9. https://doi.org/10.1590/S1413-82712004000100005 Leimeister, J. M., Wulf, J., Blohm, I., & Brenner, W. (2014). Massive Open Online Courses. 6. Lloréns Báez, L., Espinosa Díaz, Y., Murillo, C., & Luisa, M. (2013). Criterios de un modelo de diseño instruccional y competencia docente para la educación superior escolarizada a distancia apoyada en TICC. Sinéctica, 41, 2-21. Mak, S. F. J., Williams, R., & Mackness, J. (2010). Blogs and Forums as Communication and Learning Tools in a MOOC. Networked Learning, 10. Marín, V., Cabero, J. C., & Barroso-Osuna, J. (2014). Evaluando los entornos formativos online. El caso de DIPRO 2.0. REDU. Revista de Docencia Universitaria, 12(2), 375-399. https://doi.org/10.4995/redu.2014.5654 Marrero, A. (2007). La sociedad del conocimiento: Una revisión teórica de un modelo de desarrollo posible para América Latina. Marrero, Adriana. La sociedad del conocimiento: una revisión teórica de un modelo de desarrollo posible para América Latina. En: Arxius de ciències socials, 2007, 17: 63-73. https://roderic.uv.es/handle/10550/19447 Masters, K. (2011). A Brief Guide To Understanding MOOCs. The Internet Journal of Medical Education, 1(2). http://ispub.com/IJME/1/2/10995 Mayer, R., & Moreno, R. (2003). Nine Ways to Reduce Cognitive Load in Multimedia Learning. https://doi.org/10.1207/S15326985EP3801_6 Mcmillan, J. H., & Schumacher, S. (2005). Investigacion educativa: Una introducción conceptual. Pearson Educación. https://dialnet.unirioja.es/servlet/libro?codigo=323443 Means, B., Bakia, M., & Murphy, R. (2014). Learning Online: What Research Tells Us About Whether, When and How. Routledge. Milligan, C., & Littlejohn, A. (2017). Why study on a MOOC? The motives of students and professionals. International Review of Research in Open and Distance Learning, 18(2), 92-102. https://doi.org/10.19173/irrodl.v18i2.3033 Milligan, C., Littlejohn, A., & Margaryan, A. (2013). Patterns of Engagement in Connectivist MOOCs. 9(2), 11. Namakforoosh, M. N. (2006). Metodología de la Investigación (2a edición). Limusa. Nissenson, P. M., & Shih, A. C. (2016). MOOC on a budget: Development and implementation of a low-cost MOOC at a state university. Computers in Education Journal, 16(1), 8-23. Oakley, B., Poole, D., & Nestor, M. A. (2016). Creating a sticky MOOC. Journal of Asynchronous Learning Network, 20(1). https://www.scopus.com/inward/record.uri?eid=2-s2.0-84962092321&partnerID=40&md5=8392523f480e16458e10ace454335b5c OECD. (2016). Innovating education and educating for innovation: The power of digital technologies and skills (Número 2nd, p. 150 p.). OECD. http://www.oecd.org/edu/ceri/GEIS2016-Background-document.pdf O¿Regan, K. (2003). Emotion and E-learning. Journal of Asynchronous Learning Network, 7(3), 78-92. Scopus. O¿Toole, R. B. (Robert B. (2013, mayo 22). Pedagogical strategies and technologies for peer assessment in Massively Open Online Courses (MOOCs) [Working or Discussion Paper]. University of Warwick. http://wrap.warwick.ac.uk/54602/ Peng, X., & Xu, Q. (2020). Investigating learners¿ behaviors and discourse content in MOOC course reviews. Computers and Education, 143. https://doi.org/10.1016/j.compedu.2019.103673 Pereira, J. (2016). Leveraging chatbots to improve self-guided learning through conversational quizzes. TEEM. https://doi.org/10.1145/3012430.3012625 Pereira, J., Fernández-Raga, M., Osuna-Acedo, S., Roura-Redondo, M., Almazán-López, O., & Buldón-Olalla, A. (2019). Promoting Learners¿ Voice Productions Using Chatbots as a Tool for Improving the Learning Process in a MOOC. Technology, Knowledge and Learning. https://doi.org/10.1007/s10758-019-09414-9 Pérez Sánchez, L., Jordano de la Torre, M., & Martín Cuadrado, A. M. (2017). Los NOOC para la formación en competencias digitales del docente universitario: Una experiencia piloto de la Universidad de Educación a distancia (UNED). RED, 55, 1-0. Pérez, V. R. D., Tao, H. B., & Guerra, Y. M. (2021). Tendencias temáticas de investigación sobre MOOC en el ámbito colombiano: Revisión sistemática. Revista Educación en Ingeniería, 16(31), 89-97. https://doi.org/10.26507/rei.v16n31.1166 Pérez-Sanagustín, M., Hilliger, I., Alario-Hoyos, C., Kloos, C. D., & Rayyan, S. (2017). H-MOOC framework: Reusing MOOCs for hybrid education. Journal of Computing in Higher Education, 29(1), 47-64. https://doi.org/10.1007/s12528-017-9133-5 Piech, C., Huang, J., Chen, Z., Do, C., Ng, A., & Koller, D. (2013). Tuned Models of Peer Assessment in MOOCs. arXiv:1307.2579 [cs, stat]. http://arxiv.org/abs/1307.2579 Piedra, N., Chicaiza, J. A., López Meneses, J. A., & Tovar, E. (2014). An Architecture based on Linked Data technologies for the Integration and reuse of OER in MOOCs Context. Open Praxis, 6(2), 171-187. Pimmer, C., Mateescu, M., & Gröhbiel, U. (2016). Mobile and ubiquitous learning in higher education settings. A systematic review of empirical studies. Computers in Human Behavior, 63, 490-501. https://doi.org/10.1016/j.chb.2016.05.057 Pitt, R., Ebrahimi, N., McAndrew, P., & Coughlan, T. (2013). Assessing OER Impact across Organisations and Learners: Experiences from the Bridge to Success Project. Journal of Interactive Media in Education. http://eric.ed.gov/?q=%22%22&ff1=subOpen+Education&ff2=dtySince_2011&ff3=eduHigher+Education&pg=2&id=EJ1034706 Prendes, M. P. P. (2003). Aprendemos¿¿cooperando o colaborando?. Las claves del método. Redes de comunicación en la enseñanza¿: las nuevas perspectivas del trabajo corporativo, 2003, ISBN 84-493-1399-6, págs. 93-127, 93-127. https://dialnet.unirioja.es/servlet/articulo?codigo=755990 Rahman, N., & Dron, J. (2012). Challenges and opportunities for learning analytics when formal teaching meets social spaces. ACM International Conference Proceeding Series. https://doi.org/10.1145/2330601.2330619 Ramírez, M. (2014). Guidelines and success factors identified in the first MOOC in Latin America. https://repositorio.tec.mx/handle/11285/578188 Ramírez, T. (2007). Cómo Hacer Un Proyecto De Investigación. https://isbn.cloud/9789803666705/como-hacer-un-proyecto-de-investigacion/ Rayyan, S., Fredericks, C., Colvin, K. F., Liu, A., Teodorescu, R., Barrantes, A., Pawl, A., Seaton, D. T., & Pritchard, D. E. (2016). A MOOC based on blended pedagogy. Journal of Computer Assisted Learning, 32(3), 190-201. https://doi.org/10.1111/jcal.12126 Read, T., & Barcena, E. (2015). Toward mobile assisted language MOOCs (pp. 225-243). https://doi.org/10.4018/978-1-4666-8279-5.ch011 Reigeluth, C. M., Lizenberg, N., & Ros, M. Z. (2012). Teoría instruccional y tecnología para el nuevo paradigma de la educación. RED: Revista de Educación a Distancia, 32, 2-22. Reyes Rivero, L., Céspedes Gómez, G., & Molina Cedeño, J. (2017). Tipos de aprendizaje y tendencia según modelo VAK. TIA Tecnología, Investigación y Academia, 5(2), 237+. Gale OneFile: Informe Académico. Rizvi, S., Rienties, B., Rogaten, J., & Kizilcec, R. F. (2019). Investigating variation in learning processes in a FutureLearn MOOC. Journal of Computing in Higher Education. https://doi.org/10.1007/s12528-019-09231-0 Rodríguez, M. F., Hernández Correa, J., Pérez-Sanagustín, M., Pertuze, J. A., & Alario-Hoyos, C. (2017). A MOOC-Based Flipped Class: Lessons Learned from the Orchestration Perspective. En C. Delgado Kloos, P. Jermann, M. Pérez-Sanagustín, D. T. Seaton, & S. White (Eds.), Digital Education: Out to the World and Back to the Campus (pp. 102-112). Springer International Publishing. https://doi.org/10.1007/978-3-319-59044-8_12 Romero, L. N., Salinas, V. S., & Mortera, F. J. (2010). Estilos de aprendizaje basados en el modelo de Kolb en la educación virtual. Apertura, 2(1), 72-85. Ruiz Bolívar, C. (2016). El MOOC: ¿un modelo alternativo para la educación universitaria? Apertura (Guadalajara, Jal.), 7(2), 86-100. Salmon, G. (2012). E-Moderating: The Key to Online Teaching and Learning. Routledge. https://doi.org/10.4324/9780203816684 Sánchez-Vera, M. M., & Prendes-Espinosa, M. P. (2015). Beyond objective testing and peer assessment: Alternative ways of assessment in MOOCs [Más allá de las pruebas objetivas y la evaluación por pares: Alternativas de evaluación en los MOOC]. RUSC Universities and Knowledge Society Journal, 12(1), 119-130. https://doi.org/10.7238/rusc.v12i1.2262 Santamaría, M. (2014). Moocs y Spocs (Small Private Online Courses): Sus posibilidades para la Formación del Profesorado. Hamut¿ay, 1(1), 6-17. Shi, C., Fu, S., Chen, Q., & Qu, H. (2015). VisMOOC: Visualizing video clickstream data from Massive Open Online Courses. 2015-July, 159-166. Scopus. https://doi.org/10.1109/PACIFICVIS.2015.7156373 Sinha, T., Jermann, P., Li, N., & Dillenbourg, P. (2014, septiembre 27). Your Click Decides Your Fate: Inferring Information Processing and Attrition Behavior from MOOC Video Clickstream Interactions. EMNLP Workshop on Modelling Large Scale Social Interaction in Massive Open Online Courses. https://doi.org/10.3115/v1/W14-4102 So, S. (2016). Mobile instant messaging support for teaching and learning in higher education. The Internet and Higher Education, 31, 32-42. https://doi.org/10.1016/j.iheduc.2016.06.001 Spiegel, M. R., & Stephens, L. J. (2009). Estadística (Cuarta edición). McGraw-Hill. Sun, J. C.-Y., Kuo, C.-Y., Hou, H.-T., & Lin, Y.-Y. (2017). Exploring learners¿ sequential behavioral patterns, flow experience, and learning performance in an anti-phishing educational game. Educational Technology and Society, 20(1), 45-60. Scopus. Tapia, M. A. (2000). Apuntes: Metodolog de Investigación. StuDocu. https://www.studocu.com/latam/document/universidad-nacional-autonoma-de-honduras/metodos-y-tecnicas-de-investigacion-e-informatica/ensayos/tapia-b-marc3ada-antonieta-2000-apuntes-metodologc-3ada-de-investigacic-3b3n-santiago-chile/5679213/view The MOOC Guide. (s. f.). Recuperado 6 de marzo de 2021, de https://sites.google.com/site/themoocguide/home Timmis, S., Broadfoot, P., Sutherland, R., & Oldfield, A. (2014). Learning analytics and technology enhanced assessment (TEA). https://research-information.bris.ac.uk/en/publications/learning-analytics-and-technology-enhanced-assessment-tea Tomkins, S., Ramesh, A., & Getoor, L. (2016). Predicting post-test performance from online student behavior: A high school MOOC case study. 239-246. Scopus. Toto, R., & Nguyen, H. (2009). Flipping the Work Design in an industrial engineering course. 2009 39th IEEE Frontiers in Education Conference, 1-4. https://doi.org/10.1109/FIE.2009.5350529 Traxler, J. (2007). Defining, Discussing and Evaluating Mobile Learning: The moving finger writes and having writ . . . . International Review of Research in Open and Distance Learning, 8. https://doi.org/10.19173/irrodl.v8i2.346 Valencia Vallejo, N. G., Huertas Bustos, A. P., & Baracaldo Ramírez, P. O. (2014). Los ambientes virtuales de aprendizaje: Una revisión de publicaciones entre 2003 y 2013, desde la perspectiva de la pedagogía basada en la evidencia. Revista Colombiana de Educación, 66, 73-103. Vallejo, A. E., & González, A. H. (2017). MOOC: La diversificación de su diseño en el marco de su masividad y el acceso libre como elementos disruptivos. Virtualidad, Educación y Ciencia, año 8, n.o 15. http://sedici.unlp.edu.ar/handle/10915/81174 Valles, M. (1999). Técnicas cualitativas de investigación social (Primera). Síntesis. Valverde-Berrocoso, J. (2014). MOOCS: Una visión crítica desde las ciencias de la educación. https://digibug.ugr.es/handle/10481/31668 Vardi, M. Y. (2012). Will MOOCs destroy academia? Communications of the ACM, 55(11), 5. https://doi.org/10.1145/2366316.2366317 Vygotsky, L. S. (1978). Mind in Society: Development of Higher Psychological Processes. Harvard University Press. https://doi.org/10.2307/j.ctvjf9vz4 Wang, L., Hu, G., & Zhou, T. (2018). Semantic analysis of learners¿ emotional tendencies on online MOOC education. Sustainability (Switzerland), 10(6). https://doi.org/10.3390/su10061921 Wautelet, Y., Heng, S., Kolp, M., Penserini, L., & Poelmans, S. (2016). Designing an MOOC as an agent-platform aggregating heterogeneous virtual learning environments. Behaviour and Information Technology, 35(11), 980-997. https://doi.org/10.1080/0144929X.2016.1212095 Wen, M., Yang, D., & Rosé, C. P. (2014). Sentiment analysis in MOOC discussion forums: What does it tell us? Proceedings of Educational Data Mining, 130-137. Witthaus, G., Santos, A. I. dos, Childs, M., Tannhäuser, A.-C., Conole, G., Nkuyubwatsi, B., & Punie, Y. (2016). Validation of Non-formal MOOC-based Learning: An Analysis of Assessment and Recognition Practices in Europe (OpenCred). En JRC Working Papers (N.o JRC96968; JRC Working Papers). Joint Research Centre (Seville site). https://ideas.repec.org/p/ipt/iptwpa/jrc96968.html Wojciechowski, R., & Cellary, W. (2013). Evaluation of learners¿ attitude toward learning in ARIES augmented reality environments. Computers and education, 68, 570-585. https://doi.org/10.1016/j.compedu.2013.02.014 Yousef, A. M. F., Chatti, M. A., Schroeder, U., & Wosnitza, M. (2015). A usability evaluation of a blended MOOC environment: An experimental case study. International Review of Research in Open and Distance Learning, 16(2), 69-93. Yu, C.-H., Wu, J., & Liu, A.-C. (2019). Predicting learning outcomes with MOOC clickstreams. Education Sciences, 9(2). https://doi.org/10.3390/educsci9020104 Zhang, Y. (2013). Benefiting from MOOC. 1372-1377. https://www.learntechlib.org/primary/p/112136/ Zheng, S., Rosson, M. B., Shih, P. C., & Carroll, J. M. (2015). Understanding Student Motivation, Behaviors and Perceptions in MOOCs. Proceedings of the 18th ACM Conference on Computer Supported Cooperative Work & Social Computing, 1882-1895. https://doi.org/10.1145/2675133.2675217 Zhuhadar, L., Kruk, S. R., & Daday, J. (2015). Semantically enriched Massive Open Online Courses (MOOCs) platform. Computers in Human Behavior, 51, 578-593. https://doi.org/10.1016/j.chb.2015.02.067