En las siguientes páginas encontrará una serie de indicadores que se proponen para la evaluación de un programa académico en línea, con fines de asegurar su calidad.
El objetivo de presentarle dichos indicadores, es que usted pueda ayudar a valorar los mismos con respecto a 4 dimensiones que son utilidad, claridad, relevancia y viabilidad. Esto permitirá mantener aquellos que se consideren importantes, refinar otros y en su defecto desechar algunos.
A la derecha de cada indicador encontrará 4 columnas marcadas con las letras: U, C, R, V, que significan:
U= Útil C= Claro R= Relevante V= Viable
Se le solicita leer cada indicador y calificarlo en cada columna en una escala de 1 a 5, en donde 0 es la calificación mínima otorgada y 5 la máxima considerando cada una de las propiedades consideradas para cada indicador, esto es, útil, claro, relevante y viable. Ejemplo: si en la columna “U” usted marca 1, significa que el indicador no es útil desde su perspectiva.
Si usted marca “5” considera que el indicador es muy útil.
Al final de las columnas encontrará una serie de cuestionamientos sobre los indicadores, que se le solicita responder de la manera más amplia posible.
Todas sus respuestas son muy valiosas y contribuirán a la conformación de un conjunto de indicadores más consistente.
114
Recursos humanos
Personal académico
INDICADORES DIMENSIONES
U C R V
Porcentaje de profesores con estudios de posgrado (maestría y doctorado)
Porcentaje de profesores que pertenecen al SNI Porcentaje de profesores con perfil deseable PROMEP Número de alumnos por PTC
Porcentaje de profesores que participan en proyectos de investigación Porcentaje de horas/semana dedicadas a la investigación por los PTC Porcentaje de horas/semana dedicadas a tutoría en línea
Promedio de alumnos por tutor
Porcentaje de Profesores de Tiempo Completo
Porcentaje de profesores capacitados en Tecnologías de la Información y Comunicación
Porcentaje de profesores que participan en el diseño de los cursos en línea
Porcentaje de profesores que participan en actividades de superación académica, profesionalización y/ o actualización
Porcentaje de horas dedicadas por los profesores a actividades de superación académica, profesionalización y/ o actualización por año Porcentaje de profesores que alcanzan el nivel “adecuado” en la evaluación hecha por los estudiantes
Porcentaje de profesores que participan en trabajo colegiado Número de ponencias presentadas por los profesores en encuentros académicos por año
Número de publicaciones por año presentadas por los profesores Número de productos de apoyo al aprendizaje realizados por los
115 Alumnos
Promedio de puntaje en el examen de admisión U C R V
Porcentaje de estudiantes que aprueban el curso propedéutico
Porcentaje de estudiantes que eligen el programa como primera opción de estudio
Porcentaje de aprobación en las asignaturas Porcentaje de estudiantes rezagados
Porcentaje de estudiantes que consideran efectiva la retroalimentación de las actividades de enseñanza-aprendizaje
Índice de deserción
Porcentaje de estudiantes con promedio superior a 8 por año
Porcentaje de estudiantes sobresalientes con promedio superior a 9.5 por año
Porcentaje de estudiantes que participan en encuentros académicos Índice de eficiencia terminal
Porcentaje de titulación en tiempo por generación (por programa académico)
Promedio general de calificaciones por año por generación Porcentaje de alumnos con beca
Promedio de tiempo que toma al egresado conseguir su primer empleo Promedio de egresados que consiguen empleo durante el primer año terior a su egreso
Opinión promedio de empleadores sobre el desempeño de los egresados. Promedio de egresados cuyo empleo tiene al menos mediana
coincidencia con los estudios cursados
Promedio de egresados que se encuentran satisfechos con el programa profesores en un año
116 cursado
Porcentaje de estudiantes que se encuentran satisfechos con el plan de estudios
Porcentaje de estudiantes que se encuentran satisfechos con la interacción tutor-alumno
Valoración promedio del plan de estudios por parte de los egresados. Valoración promedio de los empleadores sobre el desempeño de los egresados
Valoración promedio de los empleadores sobre el plan de estudios Índice de empleo entre los egresados
Infraestructura Física y Tecnológica Ingeniería en Sistemas computacionales
U C R V
Número de servidores
Porcentaje de profesores y personal administrativo que consideran adecuadas las instalaciones para la operación del programa educativo Frecuencia de mantenimiento a la infraestructura física y tecnológica Frecuencia de renovación de la infraestructura tecnológica
Frecuencia de actualización de la infraestructura informática
Apreciación del grado de funcionalidad de la plataforma tecnológica por parte de estudiantes y profesores
Tipo de plataforma educativa
U C R V
Número de herramientas para la interacción docente –alumno, foros, chats
Número de herramientas para la comunicación asincrónica Porcentaje de estudiantes y profesores que consideran adecuada la
117 interfaz para la navegación en el curso
Porcentaje de bases de datos disponibles
Curriculum
Diseño instruccional
U C R V
Porcentaje de actividades colaborativas en un curso
Tiempo promedio necesario para la realización de las actividades del curso
Porcentaje de actividades que involucran investigación bibliográfica Porcentaje de estudiantes que consideran adecuados los materiales de apoyo al aprendizaje
Frecuencia de uso de la biblioteca virtual
Porcentaje de actividades de aprendizaje que propician el des desarrollo de uestas por parte de los estudiantes.
U C R V
Porcentaje de cursos que explicitan los objetivos generales y específicos del curso
Porcentaje de actividades que se evalúan a través de rúbricas Porcentaje de cursos que incluyen la metodología a seguir Porcentaje de material audiovisual que se incluye en los cursos Porcentaje de cursos que incluyen la autoevaluación del alumno como forma de evaluación
118 Plan de estudios
U C R V
Número de materias optativas que se pueden cursar Objetivos explicitados
Perfil de egreso explicitado
Programas indicativos de asignaturas Bibliografía
Competencias a desarrollar señaladas en cada programa indicativo Recursos didácticos
Criterios para la evaluación del aprendizaje Tutoría
Normas para la titulación
Gestión educativa Planeación estratégica
U C R V
Elementos de la visión institucional que hacen referencia al desarrollo de la educación en línea
Numero de objetivos o metas del plan de desarrollo institucional en el que se incluyen los programas en línea
Número de políticas destinadas al desarrollo de la educación en línea Lineamientos para la actualización del plan de estudios
Existencia de un plan de desarrollo del programa Número de convenios con otras instituciones o redes
119
U C R V
Porcentaje de profesores y personal administrativo que conoce las reglas de operación del programa educativo
Porcentaje de egresados que se encuentran vinculados a la institución y al programa educativo
Financiamiento
U C R V
Monto del presupuesto destinado al programa académico en línea Porcentaje de profesores, administrativos, personal de apoyo y directivos que considera adecuado el monto presupuestal del programa
Proyección de estados financieros
Planeación del Programa Educativo
U C R V
Frecuencia de la realización de diagnósticos de factibilidad
Porcentaje de profesores que participan en la planeación del programa educativo.
Porcentaje de alumnos que participan en la planeación del programa educativo
Porcentaje de sugerencias de los alumnos incorporadas a la planeación del programa educativo
Porcentaje de sugerencias de los profesores incorporadas a la planeación del programa educativo
120
Apéndice B
Guía de Entrevista Semiestructurada
¿Considera que los indicadores propuestos cubren el objeto de estudio? Si, No, Más o Menos, ¿Por qué?
¿Considera que los indicadores propuestos son relevantes y útiles para evaluar un programa académico en línea?
¿Considera adecuadas las categorías de indicadores propuestos? ¿Usted agregaría otras? ¿Cuáles?
¿Usted propondría otro u otros indicadores adicionales a los expuestos? ¿Cuáles?
121
Referencias
Acuña, P. S. (2007). Características de actividades en línea que promuevan una educación para la vida en el bachillerato semiescolarizado de la BUAP. Tesis de Maestría Publicada. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México.
Alva, R.V. (2006). El Proceso de Cambio de Modalidad Educativa en el COBAEM, de Telebachilleratos a Unidades Educativas a Distancia. Tesis de maestría publicada. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México. ANUIES, (2003). Estudio sobre el uso de las tecnologías de comunicación e información
para la virtualización de la Educación superior en México. Asociación Nacional de Universidades e Instituciones de Educación Superior. Recuperado el 14 de
septiembre de 2010 en:
http://www.anuies.mx/e_proyectos/pdf/vir_mx.pdf
ANUIES, (s.f.). La universidad virtual en México. Servicios estratégicos, libros. Recuperado el 14 de septiembre de 2010 en:
http://www.anuies.mx/servicios/d_estrategicos/libros/lib78/indice.html
Bermúdez, M.M. (2007). Análisis Del Proceso De Interacción En Ambientes De
Educación A Distancia Mediados Por Computadora. Tesis de Maestría Publicada, Escuela de Graduados en Educación, Universidad Virtual, ITESM, México. Cañon, S.D. (2007). Impacto del diplomado Maestro Virtual, impartido en modalidad
100% virtual, en la planeación, presentación y desarrollo de la catedra presencial en la Universidad Tecnológica de Pereira, Colombia. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México.
Chiprés, T.E. (2006). Diseño, Implementación y Evaluación de Estrategias Didácticas en la Enseñanza del Inglés que hagan Uso de la Internet como Herramienta
Tecnológica. Tesis de maestría publicada. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México.
Consejo para la Acreditación de la Educación Superior, (2010). Marco General para los Procesos de Acreditación de Programas Académicos de Nivel Superior.
Recuperado el dia 16 de septiembre de 2010 en:
http://www.copaes.org.mx/home/docs/docs_acred/3_Marco_general.pdf
Fainholc, B. (2004). La calidad en la educacion a distancia continua siendo un tema muy complejo. Revista de educación a distancia. Diciembre, año/vol. III, número 012. Universidad de Murcia. España. Recuperado el día 15 de septiembre de 2010 en Red de Revistas Científicas de América Latina y el Caribe, España y Portugal en:
122 Franklin, S., Peat, M., Lewis, A., & Sims, R. (2001). Technology at the cutting edge: A
large scale evaluation of the effectiveness of educational resources. In C. Montgomerie & J. Viteli (Eds.), Proceedings of Ed-Media 2001. World
Conference on Educational Multimedia, Hypermedia and Telecommunications. Tampere, Finland, June 25–30, 2001; Association for the Advancement of Computing in Education (AACE).
Frydenberg, J. (2002). Quality Standards in e-Learning: A matrix of analysis. The International Review of Research in Open and Distance Learning, Vol. 3, No 2. Irvine Distance Learning Center
University of California. Recuperado el 16 de septiembre de 2010 en:
http://www.irrodl.org/index.php/irrodl/article/view/109/189
Guevara, A. W. (2008). Estudio exploratorio acerca del nivel de satisfacción, de los participantes con respecto al aprendizaje y al uso de dispositivos móviles en el modelo de educación a distancia m-learrning. Tesis de maestría publicada. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México.
Instituto Latinoamericano y del Caribe de Calidad en Educación Superior a Distancia, CALED, (2009). Creación y puesta en marcha del CALED. Universidad Técnica Particular de Loja. Ecuador. Recuperado el 16 de septiembre de 2010 en:
http://www.utpl.edu.ec/caled/images/stories/pdfs/Docum%20Interno%20CALED%20(ES P).pdf
Hernández, S. R., Fernández, y C., Baptista, P. (2003) Metodología de la Investigación. (3ª ed.). México: Mc Graw Hill
Hernández, S. R., Fernández, y C., Baptista, P. (2006) Metodología de la Investigación. (4ª ed.). México: McGraw-Hill
INEE, (2006). Construcción de indicadores, acción clave en el proceso de evaluación del sistema educativo. Colección breviarios, Instituto Nacional para la Evaluación de la Educación. (Número 6). Recuperado de:
http://www.inee.edu.mx/images/stories/Publicaciones/Textos_divulgacion/Desafios_educ ativos/Seis/breviario6.pdf
Legaspi, B.R. (2006). Diagnóstico del Uso de Recursos Electrónicos Informativos por parte del Personal Académico del Centro Universitario de los Altos. Tesis de maestría publicada. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México.
Martínez, F. (2005). El diseño de sistemas de indicadores educativos: consideraciones teórico metodológicas. Colección Cuadernos de Investigación, Instituto Nacional para la Evaluación de la Educación. (Cuaderno número 14).
123 Martínez, M. (2006). La investigación cualitativa etnográfica en educación. Colombia:
Círculo de la Lectura Alternativa LTDA.
Michigan Virtual University, (2002). Standards for Quality Online Courses. Recuperado el 16 de septiembre de 2010 en:
http://standards.mivu.org/standards/
OCDE, (2010). Education at a Glance 2010, OECD Indicators. OECD. Recuperado de:
http://www.oecd.org/dataoecd/45/39/45926093.pdf
Ochoa, S.R. (2006). Diseño, Desarrollo e Implementación de una Guía Didáctica en Línea que Promueva el Aprendizaje Cooperativo y el Uso de Recursos Tecnológicos para Docentes Tercer Nivel de Preescolar. Tesis de maestría publicada. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México.
OREALC/ UNESCO, (2002). Proyecto regional de indicadores educativos, panorama educativo de las Américas. Santiago-Chile. Recuperado de:
http://www.prie.oas.org/espanol/documentos/Panorama%20educativo%20sp.pdf
Organización de Estados Iberoamericanos para la Educación, la Ciencia y la Cultura. (2009). Concepción y tendencias de la educación a distancia en América Latina. Documento de trabajo No. 2. Centro de Altos Estudios Universitarios. Madrid, España. Recuperado el día 15 de septiembre de 2010 en:
http://www.oei.es/DOCUMENTO2caeu.pdf
Patton, M. Q. (1987). How to use qualitative methods in evaluation. USA: SAGE Publications.
Patton, M. Q. (1990). Qualitative evaluation and research methods. (2ª ed.). USA: SAGE Publications.
Rizo, D.G. (2006). Diseño de un programa de orientación para adultos prospectos a estudiar cursos en línea. Tesis de maestría publicada. Escuela de Graduados en Educación, Universidad Virtual, ITESM, México.
Rodríguez, G., Gil, J. y García E. (1999) Metodología de la investigación cualitativa. España: Ediciones Aljibe
Rosenberg, M. (2001). E-learning: estrategias para transmitir conocimiento en la era digital. Mc-Graw Hill Interamericana. Bogotá, Colombia.
Rubio, M.J. (2003). Enfoques y modelos de evaluación del e-learning. Revista electrónica de investigación y evaluacion educativa. Año/vol. 9, número 002, pp. 101-120.
124 Universidad de Valencia, España. Recuperado el 13 de septiembre de 2010 en Red de Revistas Científicas de América Latina y el Caribe, España y Portugal en:
http://redalyc.uaemex.mx/pdf/916/91609201.pdf
Ruiz Carrillo, E. (S.F.) Lo cualitativo en la investigación y su actualidad. Psicología para América Latina. Revista electrónica de la Unión Latinoamericana de Entidades de Psicología. Consulta realizada el 22 de noviembre de 2010, en:
http://www.psicolatina.org/Dos/lo_cualitativo.html
Secretaría de Educación Pública, (2008). Principales cifras ciclo escolar 2007-2008. Dirección General de Planeación y Programación. México, D.F. Recuperado el 15 de septiembre de 2010 en:
http://www.dgpp.sep.gob.mx/Estadi/Principales%20cifras/Principales%20Cifras%202007 -2008.pdf
Sims, R. Dobbs, G. y Hand, T. (2002). Enhancing quality in online learning: scaffolding planning and design through proactive evaluation. Distance Education, Vol. 23, No. 2
Sosa, J.E. (2006). Creación Del Centro De Educación A Distancia Para El Migrante Michoacano: Estudio De La Implementación. Tesis de Maestría Publicada. Universidad Virtual Escuela de Graduados en Educación, ITESM, México. Southern Association of Colleges and Schools, SACS, (2000). Best Practices for
electronically offered degree and certificate programs. Commission on Colleges. Recuperado el 16 de septiembre de 2010 en:
http://www.sacscoc.org/pdf/commadap.pdf
Special Study Panel on Education Indicators. (1991). Education counts. An indicator system to monitor the Nation’s Educational Health. Washington. National Center for Educational Statistics. USA, Dpt. of Education.
Taylor, J. C.(2001). Fifth generation distance education. Department of Education, Training and Youth Affairs. Higher Education Division University of Southern Queensland. Recuperado el 13 de septiembre de 2010 en:
http://www.dest.gov.au/archive/highered/hes/hes40/hes40.pdf
Universidad de Sevilla, (2006). Manual para la evaluación de la calidad de acciones de formación a través del e-learning. Proyecto Prometeo. Grupo de Investigación IDEA. Sevilla, España. Recuperado el 16 de septiembre de 2010 en:
http://prometeo.us.es/qualitas/manual/manualdecalidad.pdf
UNESCO, (2001). Higher Education Indicators Study. Accountability and International Co-operation in the Renewal of Higher Education. Paris. Recuperado en:
125 UNESCO-CEPES, (2003). Studies on higher education. System level and strategic
indicators for monitoring higher education in the twenty-first century. Bucharest. Recuperado en:
http://www.cepes.ro/publications/pdf/system_level.pdf
UPN (2002). LIE Presentación General. México: Universidad Pedagógica Nacional, pp.1- 61
UPN (2004). Informe de Factibilidad de la Unidad 213 en relación a la apertura de la LIE 02. Universidad Pedagógica Nacional. Tehuacán, Puebla.
U.S. Department of Education, (2008). Evaluating online learning: challenges and strategies for success. Office of Innovation and Improvement. Washington, D.C. Recuperado el 15 de septiembre de 2010 en:
http://www2.ed.gov/admins/lead/academic/evalonline/evalonline.pdf
Valenzuela, J. R. (2004). Evaluación de instituciones educativas. México, Trillas, ITESM Universidad Virtual.
Valenzuela, J. R. y Ramírez, M. S. (2009). Sistema de indicadores de evaluación institucional para la mejora de la gestión y la calidad educativa. Memorias del Segundo Congreso de Orientación Educativa y Vocacional "Prácticas, reflexiones y propuestas en la construcción de los aprendizajes: Compromiso con un sistema educativo en transformación". Universidad de Baja California. México.
Recuperado el 15 de septiembre de 2010 en: