La amplia tipología de indicadores, que pueden definirse para evaluar el doctorado, deben basarse en el tratamiento de una gran variedad de datos primarios que sean fácilmente accesibles. Obviamente, podrán clasificarse según su nivel de agregación y la temporalidad en su recogida. A continuación se detalla una serie de datos que se clasifican, según el origen de los mismos, en cualitativos y cuantitativos. La creación de una base de datos de los estudios de doctorado se considera imprescindible en este contexto (propuesta de mejora III, 15, páginas 173 a 176).
INFORMACIÓN CUANTITATIVA
Los datos primarios que se enumeran aquí pueden considerarse per se indicadores absolutos. Se dividen en varios apartados, según la temática que describen:
Datos académicos
- Número de diplomas de estudios avanzados concedidos. - Número de plazas ofertadas en los programas.
- Número de cursos/seminarios sin alumnos matriculados o sin alcanzar el número mínimo establecido.
- Calificaciones de las asignaturas de doctorado.
Datos sobre planes docentes
- Número de programas (diferentes) ofertados. - Número de créditos ofertados en cada programa.
- Número de créditos en los que se han matriculado los alumnos.
- Número de programas (diferentes) rechazados por la Comisión de Doctorado: - por su contendido científico-técnico.
- por no alcanzar el número mínimo de alumnos (10). - Número de créditos efectivamente impartidos.
- Número de programas interdepartamentales o interdisciplinares. - Número total de cursos/seminarios ofertados.
- Número de cursos/seminarios con carácter transversal (ética, metodología, etc.). - Número de programas que han obtenido financiación competitiva.
- Número mínimo de alumnos por curso/seminario establecido tanto para la autorización de su matriculación como para que sea reconocida la labor docente del profesor.
Datos relacionados con las tesis doctorales
- Número de tesis doctorales defendidas. - Calificaciones de las tesis doctorales.
- Número de tesis doctorales rechazadas (provisional o definitivamente) por la Comisión de Doctorado.
- Duración de las tesis doctorales (desde la primara matriculación hasta la fecha de la defensa).
- Número de tesis doctorales con mención europea o con otra faceta oficial de internacionalización.
Datos sobre el PDI
- Número de profesores doctores. - Número de profesores no doctores.
- Número de profesores doctores que imparten cursos/seminarios. - Número de profesores por curso/seminario.
- Número de directores (diferentes) de las tesis doctorales. - Número de becarios predoctorales.
- Número de profesores doctores por titulación y centro. - Número total de profesores por titulación y centro).
- Número de sexenios de cada profesor que imparte cursos/seminarios de doctorado.
- Número de tesis dirigidas y en dirección de los profesores que imparten cursos/seminarios de doctorado.
Datos sobre el PAS
- Número y tipología de personal de administración en departamentos.
- Número y tipología de personal de administración en el área de doctorado (servicios centrales).
Datos sobre el alumnado
- Número de alumnos matriculados en cada programa. - Número de alumnos matriculados en cada curso/seminario.
- Número de alumnos con suficiencia investigadora en el marco legislativo anterior.
- Número de alumnos que han realizado parte de la docencia e investigación en otra universidad, con indicación de la duración de la estancia.
Datos económicos
- Ingresos por precios públicos en los estudios de doctorado.
- Ausencia de ingresos por precios públicos por exenciones debido a diferentes causas (ej. becas).
- Presupuesto para las actividades de doctorado. - Presupuesto global de la universidad.
- Ingresos por proyectos de investigación en los que están involucrados los directores de las tesis.
- Financiación de tribunales de tesis doctorales. - Limitación económica para financiar tribunales.
INFORMACIÓN CUALITATIVA
En la propuesta de mejora III. 16 (páginas 177 a 180) se exponen sistemáticamente los procedimientos para recabar la información basada en la opinión de las personas implicadas en el doctorado. He aquí las más significativas:
Datos de las entrevistas a:
- Miembros de la Comisión de Doctorado. - Coordinadores de programas.
- Directores de departamentos.
- Responsables de empresas relacionadas con los programas de doctorado.
Datos de las encuestas a:
- Alumnos matriculados y activos en cursos/seminarios.
- Alumnos que, habiendo recibido el diploma de estudios avanzados, están realizando la tesis doctoral.
- Alumnos egresados.
- Profesores (activos) de los programas de doctorado. - Directores (activos) de tesis doctorales.
- Personal de administración (departamentos y servicios centrales).
Datos del peer review sobre la producción científico-técnica de las tesis doctorales defendidas (ver propuesta III. 14 páginas 171 a 172).
PROPUESTA DE MEJORA
III.19 AUTOEVALUACIÓN Y AUTORREGULACIÓN DE
LOS ESTUDIOS DE DOCTORADO
INTRODUCCIÓN
La UNESCO, la Unión Europea y el Estado Español han optado en los últimos años por el sistema de autorregulación (fórmula mixta de autoevaluación y evaluación externa) como el más apropiado en una primera fase de mejora de la calidad de las enseñanzas en la Educación Superior. Este sistema se ha implantado con un razonable éxito en España durante el desarrollo del primer Plan de la Calidad de las Universidades (PCU). Se ha alcanzado un indudable nivel de madurez, lo que constituye una excelente plataforma para avanzar y aplicar sistemas más rigurosos de evaluación de la calidad como, por ejemplo, la acreditación (contemplada en el título V de la LOU).
En este contexto, cabe indicar la escasa consideración de los estudios de doctorado, pese a tratarse de enseñanzas regladas. Sólo en la evaluación de departamentos universitarios, desarrollada por la Unidad para la Calidad de las Universidades Andaluzas y asimilada al PCU, se considera plenamente la evaluación de las actividades del doctorado, ya que los departamentos son por ley las unidades administrativas y técnicas responsables en una primera instancia. Existen, pues, guías de autoevaluación y evaluación externa para este fin. No obstante, hay que constatar algunas consecuencias o resultados de la evaluación realizada, tales como: a) excesiva focalización en la enseñanza, en detrimento de la investigación (tesis doctorales); b) escasa consideración de los programas de doctorado, que son el núcleo clave de estos estudios, según el decreto regulador; c) ausencia de indicadores y estándares de calidad para la toma de decisiones; y d) escasa valoración a la movilidad del alumnado y profesorado.
En este documento se pretende establecer las bases para una evaluación sistemática e integral de los estudios de doctorado, que pueda incorporarse a las evaluaciones que se realizarán en el marco de la ANECA.
OBJETIVOS
? Fomentar la cultura de la calidad en los estudios de doctorado.
? Mejorar de forma integral (enseñanza e investigación) los estudios de doctorado desde la base (bottom-up).
? Homologar la autorregulación de los estudios de doctorado con la de las titulaciones del 1° y 2° ciclos y, así, contribuir a reforzar la consideración real de los estudios de doctorado como enseñanzas regladas.
? Potenciar la importancia de los estudios de doctorado en las universidades y, en consecuencia, mejorar el reconocimiento pleno de la labor del profesorado (enseñanza y dirección de tesis) y promover una mayor financiación específica. ? Establecer indicadores y estándares de calidad para cada uno, con el fin de:
a) Fundamentar las decisiones de las Comisiones de Doctorado al autorizar programas, y
b) Promover la existencia de diferentes niveles de calidad de los programas de doctorado, así como procedimientos y apoyos para favorecer el incremento de nivel de cada programa.
? Fomentar la movilidad de estudiantes, profesores y directores de tesis a través de la evaluación positiva de estas acciones.
CARACTERÍSTICAS DE LA EVALUACIÓN
A) Voluntaria: a petición de las unidades de análisis (programas y universidades). B) Estimulada: por las universidades y administraciones, de tal forma que la
participación implique beneficios tangibles e intangibles.
C) Integral: que abarque no sólo a las enseñanzas, sino también a la investigación (tesis doctorales) y gestión, implícitos en los estudios de doctorado.
D) Integrada: en el segundo Plan de Calidad de las Universidades y la Agencia Nacional de Evaluación de la Calidad y Acreditación (ANECA).
E) Independiente: de las evaluaciones ordinarias de las titulaciones y servicios (salvo en la evaluación de departamentos universitarios).
F) Bien planteada y fundamentada: desarrollo de herramientas fiables, tales como guías de procedimiento, sistemas de información e indicadores con sus estándares de calidad.
G) Orientada a la mejora: al tratarse de un sistema de autorregulación, el informe final no implica las tomas de decisiones, que deben adoptarse por los órganos de gobierno pertinentes.
H) Relacionable con: el (futuro) sistema de Acreditación de Programas de Doctorado, de tal forma que sea el punto de partida de la auditoría.
UNIDAD DE ANÁLISIS
Tal como se muestra en el diagrama adjunto, son tres las posibles unidades de análisis de los estudios de Doctorado en una universidad: los programas de doctorado, los departamentos a los que están adscritos y la Comisión de Doctorado. Estas unidades básicas tienen diferente grado de responsabilidad en la enseñanza (programas de doctorado), investigación (tesis doctorales) y gestión.
Debido a que las responsabilidades son compartidas en las tres actividades, es evidente que no se puede considerar de forma independiente las unidades objeto de análisis. Por otra parte, también debe reconocerse que si se aborda el estudio parcelado de las actividades existirá una jerarquía de importancia de las unidades en cada caso:
Evaluación de: Jerarquía de las unidades - Enseñanza
- Investigación - Gestión
- PROGRAMAS-departamento-Comisión de Doctorado
- DEPARTAMENTOS-programas-Comisión de Doctorado - COMISIÓN DE DOCTORADO-departamentos-programas
Esta aproximación es general, ya que pueden existir excepciones. Así, la gestión de un programa interdepartamental o interuniversitario es mucho más relevante que la gestión en un departamento de los que participa.
Si se pretende una evaluación integral del doctorado es necesario considerar las tres actividades de forma sistemática, por lo que resulta comprometida, en principio, la selección de la unidad de análisis para la autoevaluación y autorregulación del doctorado. También es importante tener en cuenta el nivel de agregación necesario para la toma de decisiones, consecuencia de la información generada por la evaluación. Dada la complejidad de la situación, se impone una solución de compromiso para la selección de la unidad de análisis, que se materializa a continuación en dos opciones: