Sistema Universitario Ana G. M
Sistema Universitario Ana G. M
Sistema Universitario Ana G. M
Sistema Universitario Ana G. Mé
é
é
éndez
ndez
ndez
ndez
Universidad del
Universidad del
Universidad del
Universidad del Turabo
Turabo
Turabo
Turabo
Avalúo informe al profesorado
Nuevos proyectos en búsqueda del mejoramiento continuo en la enseñanza y el aprendizaje
Presentado por: José R. Pérez Colón Vicerrector Auxiliar de Avalúo
Contenido
Proceso de avalúo en la Universidad
Revisión de los planes de avalúo (Visión 2015)
Avalúo institucional
Avalúo del aprendizaje
Proceso de informar resultados
Síntesis informe de hallazgos psicométricos
Cuestionario de Fin de Curso
Resultados Cuestionario Manejo de Tecnología
Próximos pasos
Figure 4.3
INSTITUTIONAL ASSESSMENT TWO LOOP CYCLE
SUAGM VISION 2015 and UT VISION, MISSION &
OUTCOMES
Student Evaluation of Faculty Survey
Exit Survey of Graduating Students
Licensing Exam Results
Other assessment metrics
Data Analysis Reports
Administrators and faculty meetings
“CLOSING THE LOOP”
Assessment Metrics SUAGM and
UT
Data Analysis Reports Advisory Boards Meetings
SUAGM & UT
Administrators and faculty Meetings
(Monitor implementation of improvement strategies)
EVERY- YEAR or SEMESTER LOOP
EVERY-THREE-YEARS LOOP Administrators and faculty
meetings
“CLOSING THE LOOP”
Plan Académico
Plan Académico
Cuatro Estadios de Intervención
Cuatro Estadios de Intervención
Nuevo Ingreso (COEN)
Estudio de Necesidades, Resultados College Board, GPA, ubicación de estudiantes, destrezas tecnológicas
Nuevo
Nuevo IngresoIngreso(COEN)(COEN) Estudio
Estudiode de NecesidadesNecesidades, , ResultadosResultadosCollege Board, GPA, College Board, GPA, ubicaciubicacióónnde de estudiantesestudiantes,,
destrezas
destrezas tecnoltecnolóógicasgicas
Destrezas generales de la profesión y de la especialidad, exámenes departamentales, rúbricas, notas, evaluación de los
cursos por el estudiante y el profesor
Destrezas
Destrezas generalesgeneralesde la de la profesiprofesióónny de la y de la especialidadespecialidad,,
ex
exáámenesmenes departamentalesdepartamentales, , rrúúbricasbricas, , notasnotas, , evaluacievaluacióónnde los de los cursos
cursos porporel el estudianteestudiantey el y el profesorprofesor
Curso “capstone” o de práctica, aprobación de reválidas, Estudio de Satisfacción, Cuestionario a Graduandos, Estudio de Patronos y Estudios Graduados
Curso
Curso““capstonecapstone””o de o de prpráácticactica, , aprobaciaprobacióónnde de revreváálidaslidas, , EstudioEstudiode de SatisfacciSatisfaccióónn, , Cuestionario
Cuestionario a a GraduandosGraduandos, , EstudioEstudiode de PatronosPatronosy y EstudiosEstudiosGraduadosGraduados INSUMO INSUMO INSUMO Proceso Proceso Proceso PRODUCTO PRODUCTO Egresado Egresado
Servicios y Desarrollo Estudiantil 2 Función Pública 3 Gerencia y Desarrollo Organizacional 4 Infraestructura Física y Tecnológica 5 Fortalecimiento Fiscal 6 Asuntos Académicos 1 7 7 VECTORES MEDULARES CLIENTE VECTORES DE APOYO
VECTORES ESTRATÉGICOS, VISIÓN 2015
Requisitos de MSCHE
“Institutional Assessment”
Avalúo periódico de la efectividad
institucional en el cual se estudie la
totalidad de la oferta académica de la
institución, servicios y procesos
incluyendo la planificación, asignación de
recursos, renovación institucional;
liderato, gobierno administración e
integridad institucional y los resultados
del aprendizaje.
Requisitos de MSCHE
“Assessment of Student Learning”
Avalúo en las áreas institucional, del programa académico y al nivel de los cursos impartidos. Énfasis se presenta en el conocimiento acumulado del educando, destrezas analíticas y en el área de
la información, competencias específicas,
conocimiento y habilidades cognoscitivas,
desarrollo de actitudes y crecimiento personal entre otras.
Resultados del aprendizaje
Niveles de análisis
Estudiante Curso Programa EgresadoEgresado Trabajo
Discusi
Proceso de informar resultados
Todas las escuelas y programas académicos
deben tener un plan de avalúo.
El plan debe medir los objetivos del
aprendizaje en los cursos y el programa.
La evidencia debe presentarse en un informe
anual por escuela.
El proceso debe demostrar que los objetivos
se cumplen y que se fomenta el mejoramiento
continuo.
Proceso de informar resultados
El informe anual debe contener lo siguiente:
La lista de los objetivos del programa.
Breve descripción de cómo la escuela se asegura
que los estudiantes alcanzan los objetivos propuestos.
Breve descripción de cómo la escuela mide los
objetivos.
Informe breve con evidencia del aprendizaje de los
estudiantes en el año académico.
Un informe de cómo la escuela ha utilizado los
resultados del avalúo para mejorar el aprendizaje de los estudiantes.
Cuestionario sobre el manejo de tecnología
Metodología
1282 cuestionarios se administraron a estudiantes
de la Universidad.
El margen de error de la muestra es más o menos 3
por ciento.
El cuestionario se diseñó con una escala Likert de 0
al 5.
0 nunca lo utilizo, 5 dominio excepcional
Grados técnicos, bachillerato y maestría.
El cuestionario se validó por medio de jueces.
El propósito, determinar la cantidad de estudiantes que
poseen computadora.
La frecuencia del uso de la tecnología.
Percepciones sobre el dominio de la tecnología.
Cuestionario sobre el manejo de tecnología
Síntesis de resultados
85.68 por ciento posee computadora en el hogar
65.78 por ciento posee Internet en el hogar
6.99 por ciento nunca usan la computadora
47. 68 por ciento la usan diariamente
82. 37 por ciento la usan en sus hogares
25.90 por ciento en laboratorios de la Universidad
Las áreas de pobre dominio son utilizar una hoja
de cálculos matemáticos, uso de la calculadora gráfica, biblioteca virtual, enviar un correo
Cuestionario sobre el manejo de tecnología
Recomendaciones
Continuar con la inversión en tecnología en la
Universidad brindando énfasis en los salones.
Fomentar el uso de la Biblioteca Virtual.
Promover el uso de tecnología en las clases que
impartimos
Ofrecer talleres de uso, manejo y integración de la
Validación Cuestionario de Fin de Curso
Metodología
El cuestionario inicialmente se valida por medio de
jueces.
Es revisado por los miembros de Junta
Académica.
100 secciones al azar fueron seleccionadas
61 secciones forman la muestra
Lo contestan 726 estudiantes, el 81.8 por ciento
Validación Cuestionario de Fin de Curso
Validez : es el grado mediante el cual se
puede hacer inferencias correctas basadas en
los resultados de un instrumento (Fraenkel y
Wallen, 2003). Según, la American Education
Research Association, American
Psychological Association y la Nacional
Measurement in Education (1999) la validez es
el grado en el cual la evidencia y la teoría
apoyan las interpretaciones de la puntuación
en un examen o cuestionario
Validación Cuestionario de Fin de Curso
Confiabilidad: es el grado de consistencia
de las puntuaciones de un sujeto en
distintas administraciones del instrumento
(Fraenkel y Wallen, 2003). La confiabilidad
puede estimarse, también, utilizando
métodos que examinan la consistencia
interna del cuestionario.
Consistencia interna: cuan constante es la
ejecución examinada a través de los ítems
de un cuestionario, es decir, si los ítems
tienen las mismas cualidades.
Validación Cuestionario de Fin de Curso
Establece, Haskel (1997) que la validez y
confiabilidad de las evaluaciones a los
profesores están influenciadas por
múltiples variables. Entre las variables se
encuentran, edad y sexo del estudiante,
tamaño del grupo, año de estudio del
educando, estilo del profesor, materia
impartida, tipo de curso, de concentración
o electivo, disponibilidad del profesor, su
ausencia o presencia durante el proceso de
evaluación y la duración del curso.
Validación Cuestionario de Fin de Curso
Dimensiones Ítems Promedio Error estándar Confiabilidad Alfa de Cronbach Criterios Gen. 7 4.25 .25 .91 Estrategias 4 4.22 .33 .85 Niveles Apre. 9 4.19 .17 .96 Servicios 4 3.65 3.65 .77 Guía curso 4 1.12 .08 .91 Total 28 3.86 .13 .97
Validación Cuestionario los hallazgos
1. El cuestionario es un instrumento válido y confiable.
2. La dimensión Guías del curso mide un constructo
diferentes que las dimensiones Criterios generales, Estrategias de enseñanza y el curso y los niveles de aprendizaje.
3. La dimensión Estrategias de enseñanza discrimina por
escuela académica. Los estudiantes matriculados en
cursos de Administración de Empresas evalúan diferente a los cursos cuando se comparan con estudiantes
matriculados en cursos de las escuelas de Ciencias Sociales y Humanas y de Estudios Técnicos.
Validación Cuestionario los hallazgos
4. Los estudiantes matriculados en cursos de las
escuelas de Ciencias de la Salud, Educación,
Ciencias y Tecnología, Estudios Profesionales e Ingeniería evalúan a los mismos de manera
semejante.
5. Las dimensiones Servicios de apoyo al
estudiante y Guías del curso no discriminan por escuelas académicas.
6. Los estudiantes matriculados en cursos del nivel
remediar evalúan diferente los cursos en las
dimensiones Criterios Generales y Estrategias de enseñanza cuando se compara con estudiantes de primer año o con estudiantes del primer año de maestría.
Próximos pasos
Administración del Cuestionario de
Indicadores de Calidad y de Fin de Curso
Nuevo estudio de manejo de la tecnología y
del Programa EDUCO
Presencia en la Internet
Informes de resultados de avalúo
Cuestionario en el WEB
Próximos pasos
EDUCO es un sistema de aprendizaje encolaboración mediante el uso de la computadora, (Kurhila, Miettienen, Nokelainen y Tirri, 2002). En el mismo se graba la cantidad de tiempo que el
participante utiliza el sistema.
Administrar dos cuestionarios para estudiantes uno para medir el nivel de aceptación de los
estudiantes con EDUCO y el segundo para medir la aptitud de los estudiantes a la educación
mediante la utilización de la computadora en ambientes virtuales.
Tecnología y computadoras
Subcultura de la
materia Creencias de la materia
Teorías del profesor Estilos de enseñanza del profesor Experiencias previas del educador Practicas actuales en la enseñanza de la materia
Orientación pedagógica futura del profesor
MODELO DE CALIDAD INSTITUCIONAL PROFESORADO Preparación académica Investigación/Publicaciones Evaluación de la Enseñanza Misión Visión PROGRAMAS ACADÉMICOS Pertinencia y Actualización del Currículo Componente Práctico Utilización de Tecnología Acreditación ADMINISTRATIVO (Servicios de Apoyo) Biblioteca Adecuacidad, pertinencia, disponibilidad, uso y calidad de la tecnología ESTUDIANTES Avalúo Nivel de Satisfacción Nivel de Aprendizaje
LINEAMIENTOS UT VISIÓN 2015
LINEAMIENTOS UT VISIÓN 2015
Servicios y Desarrollo Estudiantil 2 Función Pública 3 Gerencia y Desarrollo Organizacional 4 Infraestructura Física y Tecnológica 5 Fortalecimiento Fiscal 6 Asuntos Académicos 1 7 7 VECTORES MEDULARES CLIENTE VECTORES DE APOYO 7 7Calidad y Efectividad Institucional
Todas las escuelas habrán
incorporado el proceso de avalúo conforme a los
Planes de Avaluo
Todas las escuelas se
habrán sometido a un
proceso de acreditaciones especializadas.
Se establecerá el Centro de
Efectividad Institucional con los componentes de
planificación, avalúo y presupuestación.
Indicadores de calidad
Por ciento de cursos impartidos por profesores tiempo completo
Satisfacción de los estudiantes con la enseñanza Empleo luego de la graduación área de especialidad Aprobación de reválidas
Acreditaciones especializadas Solicitudes de admisión
Empleados que conocen el plan estratégico, misión y visión
Tasas de graduación
Indicadores de calidad
Retención de estudiantes
Satisfacción del profesorado con la universidad Por ciento de profesores con grados terminales Cantidad de libros en la biblioteca
Por ciento de cursos que requieren el uso de la computadora
Próximos pasos
Visitas del Consejo de Educación Superior, Proceso de renovación de Licencia Institucional fechas: 28, 29 y 30 de agosto Diseño Gráfico, Consejería
Psicológica, Ciencias Forenses, Patología del Habla, Gerencia de Proyectos y Maestría en Bellas Artes
Septiembre maestría y doctorado en Estudios Culturales
Próximos pasos
Octubre maestría en enfermería y visita CETA Enero a mayo visita a la Institución y al Centro
