TEMA: INSTRUMENTOS DE MEDICION EN EL CAMPO DE
LA EVALUACIÓN
1. TIPOS DE INTRUMENTOS
2. ETAPAS DE CONSTRUCCION
3.
VALIDEZ
Y CONFIABILIDAD
Instrumentos de Medición en el campo de la
Evaluación
1) MEDICIÓN
Medir es averiguar la cantidad de una cosa, de un fenómeno, de una
característica o de un producto. Hay medición cuando se compara
una cosa cualquiera con otra que se ha elegido como unidad de medida. Ejemplo: Determinar en metros el largo de un salón, el peso
de una persona en kilogramos, el nivel de inteligencia de un alumno,
los resultados del aprendizaje mediante un test.
2) EVALUACIÓN
Evaluar es apreciar el valor de una cosa, de un fenómeno, de una característica o de un producto. Hay evaluación cuando decimos
que un alumno es deficiente o aprovechado, después de haber
medido el rendimiento de su aprendizaje mediante una prueba y
haber comparado el resultado con un criterio previamente establecido,
Instrumentos de Evaluación
La Observación
La Entrevista
Técnicas Sociométricas
Cuestionarios, Inventarios,
Test Pruebas de
Rendimiento Portafolios
LA OBSERVACIÓN
Instrumento
Tiene gran aplicabilidad en el proceso de evaluación, ya que proporciona información que permite realizar juicios de valor apropiados sobre las diferentes facetas
de la vida en el salón de clase.
No solo en forma individual, sino el grado de interacción de un grupo, características sociales, las
relaciones docente - estudiante y estudiante - estudiante. Para Lafourcade lo esencial en la elaboración de instrumentos y la aplicación de técnicas adecuadas, que enriquezcan la información
sobre aspectos de la conducta que se escapan a otros procesos de medición, estriba en la delimitación
de funciones.
PRODUCTO COMPORTAMIENTOS REPRESENTATIVOS
Habilidades
Hablar, escribir, escuchar, lectura oral, realizar experimentos en el laboratorio, dibujar, tocar un instrumento musical, bailar, gimnasia, habilidades de trabajo, habilidades de estudio y habilidades sociales.
Hábitos de trabajo
Efectividad en la planeación, uso del tiempo, uso de equipo, uso de recursos; la demostración de rasgos como la iniciativa, la capacidad creadora, la persistencia, la capacidad para infundir en otros la confianza en él.
Actitudes sociales
Preocupación por el bienestar de otros, respeto a las leyes, respeto a la propiedad ajena, sensibilidad ante las cuestiones sociales, preocupación por las instituciones sociales, deseo de trabajar en pro de la mejoría social
Actitudes científicas
Mente abierta, voluntad de detener todo juicio final, sensibilidad para las relaciones mecánicas, estéticas, científicas, sociales, recreativas, vocacionales.
Intereses
Sentimientos expresados con respecto a varias actividades educacionales, mecánicas, estéticas, científicas, sociales, recreativas, vocacionales.
Aprecios
Sensación de satisfacción y goce que se expresa con respecto a la naturaleza, la música, el arte, la literatura, la habilidad física, las contribuciones sociales notables.
Ajustes
Entre los principales instrumentos que el docente puede utilizar
para registrar los datos obtenidos mediante la observación se
encuentran
:
• Listas de cotejo.
• Escalas de clasificación o calificación.
• Entrevista
• Listas de corroboración • Registros de desempeño. • Pautas para medir productos. • Diario de campo.
Listas de Cotejo
Son listas de palabras, frases u
oraciones que expresan conductas
dicotómicas (sí - no, logrado - no
logrado y otras). Se emplean para
valorar aspectos específicos.
La lista proporciona información en
la que se señala si una
característica dada está presente
o no. Su mayor valor es ser fácil de
construir y aplicar, y objetiva
LAS ESCALAS DE CALIFICACIÓN:
Es un conjunto de características o comportamientos por evaluar, de forma gradual. El docente debe especificar de antemano su atención en las características
previamente señaladas.
Se pueden usar para evaluar procedimientos, productos finales y desarrollo personal.
El docente usa la escala para indicar la cualidad, cantidad o nivel de lo observado.
Una escala de calificación sirve para varias funciones importantes:
dirige la observación hacia aspectos específicos y claramente definidos.
suministra un cuadro común de referencia para
comparar a todos los alumnos según el mismo conjunto de características.
Tipos de escalas:
Escala Numérica:
Consiste en una lista de números con claves: ambos permanecen constantes de un aspecto
a otro. Es uno de los tipos de escala más sencillos. El docente marca en las casillas correspondiente el
número que indica el grado hasta donde se presenta la característica
o rasgo que se ofrece en forma de indicador; se
asignan valores generalmente de 1 a 5, se utiliza una clave común de
5 excelente a 1 deficiente.
CRITERIOS
INDICADORES 5 4 3 2 1
Utiliza correctamente las formulas notables
Trabaja en orden los procedimientos
Interpreta adecuadamente los resultados
TOTAL
Escala Gráfica:
Implica una breve descripción del aspecto por observar. Se marca la opción que a criterio del observador, describe mejor
el aspecto.
Aunque la línea de la escala gràfica hace que sea posible calificar en puntos intermedios,
el uso de palabras solas para identificar la categorías no tienen gran ventaja sobre el uso
de números..
CRITERIOS INDICADORES Siempre FrecuenteMuy MenudoA Rara vez Nunca
Utiliza correctamente las formulas notables
Trabaja en orden los procedimientos
Interpreta adecuadamente los resultados
Escala Descriptiva:
Implica una descripción más amplia que la de la escala gráfica. Se emplea un orden gráfico. Se debe ser conciso, claro y utilizar términos observables.
A cada enunciando sigue una escala que represente con frases descriptivas los distintos grados del atributo en observación.
CRITERIOS INDICADORES
Utiliza correctamente las formulas notables
Trabaja en orden los procedimientos
Interpreta
adecuadamente los resultados
Nunca participa, es pasivo-callado
Participa tanto como cualquier otro miembro del grupo
Participa más que cualquier otro de los miembros del grupo
Escala de apreciaciones:
Es un tipo de escala de calificación en la que se miden los distintos grados de un aspecto determinado.
Para elaborar una escala de apreciaciones se siguen los siguientes pasos:
• determinar los indicadores
• escribir las instrucciones para su aplicación • ordenar los valores
• enunciar los indicadores
• indicar la forma de obtener la puntuación total.
ENTREVISTA:
Instrumento
Es una técnica de observación que por medio de una conversación formal o informal el docente interactúa con el estudiante, permitiéndole profundizar en aspectos
relevantes, como opiniones preferencias, actitudes, intereses y otros La entrevista puede ser estructurada o no.
se recomienda una guía flexible que oriente la conversación.
Las informales, es decir conversaciones durante el recreo o actividades extra clase, son fundamentales, ya que
brindan información importante,.
La flexibilidad de la técnica, permite obtener datos imposibles de lograr por medio de otras técnicas, ya que,
independiente de lo que el alumno niegue o afirme, se puede observar como lo afirma o como lo niega (acento,
LISTAS DE CORROBORACIÓN
La lista de corroboración es semejante en su forma y función a la escala de calificaciones. La diferencia básica entre ellas esta el tipo de juicio que se pide.
Para elaborar una lista de corroboración para la evaluación de procedimientos deben tomarse en cuenta los siguientes aspectos.
identificar y describir cada uno de los actos específicos que desea evaluar.
añadir a la lista aquellos actos que representan errores comunes que puedan identificarse claramente.
ordenar los comportamientos que de desean evaluar y los errores probables en el orden aproximado en que se espera que ocurran.
proporcionar un procedimiento sencillo para numerar los comportamientos en secuencia o para tachar cada comportamiento según va ocurriendo.
Además de usarse en la evaluación de procedimientos,
también puede utilizarse la lista de corroboración para evaluar productos. Para esto debe establecerse una lista de
REGISTRO DE DESEMPEÑO:
Se utiliza en la evaluación formativa con el propósito de apreciar la forma como se ejecuta el aprendizaje de una destreza o habilidad y así poder realimentar el proceso. Para evaluar como se desarrollan las actividades y los resultados de ellas, ejemplo: el manejo de un aparato o un equipo. Para elaborar un registro de desempeño se siguen los siguientes pasos:
• establecer los aspectos importantes por observar
• establecer la secuencia de dichos pasos
• anotar las observaciones pertinentes
• obtener la puntuación total.
Ejemplo:
Nombre del estudiante_____________________________________________________
Lugar donde se realiza la
observación______________________________________________________________
Tiempo de observación__________________ Fecha ____________________________
Pautas para Evaluación de Productos y Diario de Campo
• PAUTAS PARA LA EVALUACIÓN DE PRODUCTOS:
Las acciones educativas persiguen la obtención
de resultados visibles de la actividad individual o grupal como por ejemplo un informe escrito, un periódico mural, etc., en donde el alumno pueda tener una referencia para saber qué no estuvo bien de su trabajo y qué hacer para mejorarlo. Para elaborar una pauta se siguen los siguientes pasos:
• establecer los aspectos que se deben tomar en
cuenta,
• establecer la escala en la cual se apreciará su
cumplimiento.
• EL DIARIO DE CAMPO:
El diario de campo es un instrumento de
recopilación de datos, con cierto sentido íntimo, que implica la descripción detallada de acontecimientos, y se basa en la
observación directa de la realidad; por eso se denomina "de campo".
Para el docente, el diario de campo es un
instrumento de reflexión y análisis del
trabajo de aula y la realidad en la cual está inmersa la institución, que permite la
REGISTRO ANECDÓTICO.
Observado... Fecha...
Hora...
Observador... Lugar...
Contexto, situación: Durante una clase de educación física
Incidente, anécdota: El observado, tras un intercambio de palabras con un compañero suyo, le agrede verbalmente, le amenaza, se marcha violentamente de la clase, anunciando que los amigos de su pandilla tendrán conocimiento de lo que allí se ha hablado.
Observaciones: Sus compañeros no le dieron demasiada importancia, siguieron como si no hubiera sucedido nada importante, incluso el amenazado dijo: no os preocupéis, no hará nada.
Las técnicas más habituales son:
1.- Los anecdotarios: Sirven para recoger de forma episódica los hechos más sobresalientes que se producen en el desarrollo de una determinada acción relativa al campo de las aptitudes, de las actitudes, de los intereses, de las reacciones temperamentales, de sociabilidad o de
cualquier otro tópico que nos interese. No debe recoger opiniones ni juicios de valor debe exclusivamente describir los hechos o las acciones.
Los pasos a seguir serían: seleccionar al campo de observación (clase, taller; oficina, relaciones informales, bar, hogar...), seleccionar los observados (todos, sólo algunos), tiempo (un día, una semana, un
mes), elaborar una ficha de registro más o menos estandarizada, registrar las observaciones, archivarlas. Cada anécdota debe plasmarse
Instrumentos de Medición
2.- Los diarios y los informes
Constituyen unos instrumentos de
recogida de información que pueden ser más o menos sistematizados.
Pueden oscilar desde una simple relación o enumeración de
actividades realizadas o pueden estar ya estructurados y referidos a campos concretos e incluir valoraciones,
pensamientos, reflexiones.
3.- Listas de control.
Son listados enumerativos, la mayoría de las veces bastante largos, de conductas abiertas o ya determinadas con las que el observador debe estar habituado. En ellas debe anotar si tal conducta, comportamiento, hábito, costumbre,...
aparece, se manifiesta, o no. Exigen una buena preparación por parte del observador; grandes dotes de observación y mucho tiempo, no admite matizaciones. Pueden dirigirse las observaciones y las anotaciones tanto a grupos como individualmente.
Modelo (Identificación (nombre o grupo observado)
(Señale con una X la columna correspondiente) SI NO
Respecto a su cumplimiento
Es puntual a la hora de iniciar el trabajo Es puntual a la hora de finalizar el trabajo Busca excusas para abandonar el trabajo Entabla conversaciones innecesarias
Respecto a sus compañeros
Siempre está dispuesto a ayudar Es sincero
Se muestra alegre
Presta sus herramientas o útiles de trabajo
Respecto a sus superiores
Es sumiso
Busca las razones de las órdenes Es respetuoso
Escalas de valoración
Estas escalas son prácticamente las mismas que las de control, si bien en ellas se pueden incluir matizaciones respecto al grado de acuerdo o desacuerdo, existencia o no de una determinada cuestión, comportamiento, etc. Son clásicas las escalas de Likert, Thurstone, Osgood y Guttman.
Escalas de Likert o de puntuaciones sumadas.
Permiten la cualificación y la cuantificación, su presentación puede ser
descriptiva, gráfica o numérica. La escala en
su totalidad sería un listado de ítems, preguntas o gráficos
referidos a todos los aspectos Contemplados en dicha escala.
Modelo
Descriptivo
Muy deAcuerdo En Desacuerdo Sencillamente de Acuerdo Muy de Acuerdo
Las escalas de Thurstone
Suponen, para quien las elabore, realizar una lista de rasgos respecto a un aspecto, persona o fenómeno, en la que el primer ítem encierre una descripción o
calificación excelente y el último una descripción o calificación muy negativa y en medio unos quince o veinte niveles intermedios ordenados progresivamente.
La lista así elaborada se da para ser respondida a las personas escogidas por
la muestra. Su respuesta se limita a señalar la frase con la que está más de
acuerdo, una vez leídas todas. Su construcción es bastante complicada,
redacción de ítems, graduarlos, nivelarlos.
(Lea todas estas afirmaciones y señale aquella -una- con la que se sienta más
Identificado(a)).
1.-El trabajo para el hombre es el mayor bien del que puede gozar, una bendición.
4.-El trabajo es una fuente de satisfacciones. 10.-El trabajo es un medio para poder subsistir. 15.-El trabajo, si no existiera mejor.
Las escalas de Osgood
Al igual que las anteriores sirven para acceder a determinadas informaciones, que por otros medios serían difícil de alcanzar; sus datos pueden ser analizados comparativamente, para establecer procesos de seguimiento o
evolución, etc. Al igual que las escalas de Likert, pueden presentar distintos grados o niveles en las matizaciones. Normalmente se establecen grados impares (3, 5 ó 7 posibilidades de respuesta) para mejor ajuste a las curvas de normalidad (Gauss), aunque también pueden establecerse niveles pares (2,4, 6 u 8 opciones de respuesta) si nos interesa detectar Informaciones fácilmente
dicotomizables, del tipo «buenos» «malos», «cumplidores» «no cumplidores»,«rápidos» «lentos»,
Modelo
Tópico: Mi lugar de trabajo es...
Agradable 6 5 4 3 2 1 Desagradable
Diverso 6 5 4 3 2 1 Monótono
Acogedor 6 5 4 3 2 1 Frío
Seguro 6 5 4 3 2 1 Peligroso
Tópico: Mi superior es...
Simpático 7 6 5 4 3 2 1 Antipático
Justo 7 6 5 4 3 2 1 Injusto
Locuaz 7 6 5 4 3 2 1 Parco
Nervioso 7 6 5 4 3 2 1 Tranquilo
Cordial 7 6 5 4 3 2 1 Hostil
Las escalas de Guttman
son otro tipo de escalas, apropiadas para evaluar actitudes, aunque también
pueden ajustarse a otros requerimientos. Son escalas acumulativas, puesto que la
primera respuesta debe incluir a las restantes. Son bastante complicadas de formular si se quiere respetar
esa condición en algunos casos. Pueden dirigirse a varios campos de estudio o
ser monográficas.
(Señale con X las respuestas correctas, o con las que esté más de acuerdo, puede responder a más de una. En otros casos resuelva los problemas que se le plantean).
1. ¿Cuántos días tiene de vacaciones al año?
Mas de treinta
Entre quince y treinta
Menos de quince
2. ¿Cuántos días de sus vacaciones pasa fuera de su residencia habitual?
Más de treinta
Entre veinte y treinta
Entre diez y diecinueve
Menos de diez
1. Respecto a sus compañeros de trabajo cree que
Todos son buenos
La mayoría son buenos
Sólo algunos lo son
2. Respecto a sus superiores
Todos son muy competentes
La mayoría lo son
Solamente algunos
(Señale con X las respuestas correctas, o con las que esté más de acuerdo, puede responder a más de una. En otros casos resuelva los problemas que se le plantean).
1. ¿Cuántos días tiene de vacaciones al año?
Mas de treinta
Entre quince y treinta
Menos de quince
2. ¿Cuántos días de sus vacaciones pasa fuera de su residencia habitual?
Más de treinta
Entre veinte y treinta
Entre diez y diecinueve
Menos de diez
1. Respecto a sus compañeros de trabajo cree que
Todos son buenos
La mayoría son buenos
Sólo algunos lo son
2. Respecto a sus superiores
Todos son muy competentes
La mayoría lo son
Las escalas de
producción.
Evaluar por escalas de producción supone llevar a cabo comparaciones de trabajos realizados con modelos o escalas graduados lo cual posibilita la
localización de un determinado trabajo en un nivel determinado que le
es adjudicado en función de las coincidencias o similitudes con un nivel
de esa escala. Por ejemplo, algunos modelos existentes para valorar la escritura. En algunos casos, existen escalas de producción publicadas e incluso tipificadas, pero en otros deben
construirse a partir de las propias producciones de los alumnos de
acuerdo con unos criterios.
Nivel de producción 1: Realismo, colorido, profundidad, sombreado y detalles.
Nivel de producción 2: Realismo, detalles, colorido y sombreado.
Nivel de producción 3: Realismo, bastantes detalles, colores no bien logrados y falta de profundidad.
CUESTIONARIOS, INVENTARIOS Y TEST
Los cuestionarios son unos instrumentos que permiten la recogida rápida y
abundante de información respecto a los temas más variados, tanto tomados de forma aislada, como conjunta. Los
cuestionamos pueden ser monotemáticos o politemáticos según intenten cercar un objeto de estudio desde varias
problemáticas. Son presentaciones escritas en las que el sujeto anota sus apreciaciones. Se presentan en forma abierta o cerrada; en el primer caso puede escribirse lo que se quiera, en el segundo caso, quien responde al
cuestionario debe ceñirse a las respuestas que se le ofrecen.
(Cuestionario sobre el ambiente de trabajo, Escriba o señale con X donde corresponda)
1.-Exponga brevemente cómo percibe el ambiente donde usted trabaja (Pregunta abierta)
5.-Retiraría usted los ceníceros de las mesas de trabajo en aquellas salas donde trabajaran más de uno:
SI NO (Pregunta cerrada)
10.-Si el ambiente de su trabajo no es del todo bueno ¿a qué cree que se debe? (Puede señalar más de una):
Al mucho trabajo que hay.
Siempre se va con prisas.
No hay buenas relaciones con los jefes.
No hay buenas relaciones con los compañeros.
Existe mucha competitividad interna.
Los Inventarios
Los inventarios son un tipo especial de cuestionarios; se diferencian en que tienen
una presentación mucho más
estandarizada y reiterativa; algunos de ellos, con el tratamiento y requisitos necesarios, se convierten en test de personalidad, test de
intereses actitudinales, aptitudinales y vocacionales.
Los ítems se prestan a varias formalizaciones pero las más usuales responden al siguiente
esquema: Ante distintas afirmaciones se debe contestar en la casilla del SI, del NO o
de una casilla con ?, que significa una posición dudosa, ambivalente...
Modelo
Se considera una persona cumplidora SI NO ?
Se considera una persona ambiciosa SI NO ?
Los Test
Los Test son pruebas de evaluación de la más diversa índole. Existen test de aptitudes mentales: inteligencia, memoria, atención, etc; de personalidad; de intereses
vocacionales; de instrucción, etc. Todos ellos se configuran a partir de una serie de preguntas o tareas
las cuales una vez respondidas o realizadas permiten ser puntuadas y establecer categorías en base a las diferencias individuales, la mayoría de las veces según
criterios y requisitos estadísticos rigurosos
EL PORTAFOLIOS (Carpeta) y el Cuaderno de Clase
El Portafolios.
Señala que la evaluación por portafolios, también llamada
evaluación por carpetas, consiste en una colección de trabajos de los alumnos que busca demostrar, por medio de la mejora
progresiva, lo que son capaces de hacer en un área o contenido específico.
Se trata de un conjunto particular de selecciones de actividades y trabajos que recoge, entre otras, las mejores producciones de los alumnos,
Este sistema de evaluación no se presenta como una forma
alternativa de valoración de los aprendizajes escolares, sino como un complemento
El cuaderno de clase
es un instrumento muy extendido en los centros escolares y resulta de gran utilidad para la evaluación formativa.
No es un a prueba de evaluación en sentido estricto ya que no supone un trabajo adicional para el alumno, ya que simplemente recoge el trabajo de
cada día, tanto el de clase como el desarrollado en casa. El cuaderno de
clase, además de un instrumento personal del alumno, es un medio de
comunicación, cuya eficacia dependerá del nivel de colaboración que el profesor promueva en los textos
LAS TÉCNICAS SOCIOMÉTRICAS
Las técnicas sociométricas tienen como finalidad el obtener información acerca de la
posición de los individuos dentro de un grupo así como de las relaciones que entre ellos se
establecen. Son técnicas que permiten conocer y evaluar situaciones personales o grupales en temas tales como: participación,
liderazgo, aceptación, rechazo, etc.
El sociograma se aplica a grupos con una cierta estabilidad y continuidad. No es útil cuando se trate de grupos inestables, de poca duración y de escaso conocimiento
entre ellos
Determinar la situación sociométrica. Debe ser distinta para cada caso, aunque se
mantengan ciertas constantes. No es la misma situación la que se brinda si la pregunta se
refiere a jugar a trabajar; a divertirse, a estudiar, etc. Suelen distinguirse tres campos:
de la afinidad (por igualdad de intereses), el de la efectividad (por la seguridad de alcanzar un objetivo) y el de la afectividad
PRUEBAS AUTOMATIZADAS
LAS PRUEBAS DE RENDIMIENTO
Los exámenes
Los exámenes permiten a los alumnos elaborar sus respuestas de acuerdo con sus conocimientos y estilo
personales. Gracias a ellos se puede comprobar directamente la calidad y las características de las respuestas, su profundidad y los procesos mentales implícitos en ellas. Puede detectarse aspectos tales como. el dominio terminológico, la fluidez verbal , el nivel léxico,
la sistematización del discurso las estructuras
conceptuales, las fuentes de conocimiento, el manejo de técnicas, la originalidad y creatividad.
Las ventajas de los exámenes radican en la facilidad de su elaboración y bajo costo, en permitir una elaboración de respuestas personales, en la gran cantidad de información que puede recogerse, y en que permiten preguntar a todos
Exámenes Orales
Los exámenes orales
Pueden presentar un mayor o menor nivel de estructuración (rigidez de la técnica en sí); piénsese en un examen oral que
consiste en dar contestaciones a un cuestionario cerrado previamente preparado por el profesor; o en la evaluación de
un debate participativo. Las formas de un examen oral según Rodríguez Diéguez (l980) son:
a) Desarrollo oral de un tema sacado a suerte o elegido por el profesor.
b) Tema elegido por el alumno.
Ambas formas pueden permitir su realización con tiempo de preparación o sin él. Realizarse de forma autónoma y
enteramente personal o con realización de preguntas por parte del profesor
c) Interrogatorio efectuado por el profesor.
d) Debate entre alumnos, tanto individuales como grupales. e) Entrevistas con diferentes grados de estructuración. f) Ponencias o presentación de trabajos preparados
Etapas de Construcción de un instrumento de medición
ETAPAS DE CONSTRUCCION DE UN INSTRUMENTO DE MEDIDA
1. Marco general del instrumento de medida
- Justificación y motivación
- Contexto de aplicación
- Uso e interpretación de las puntuaciones
2. Definición operativa de la variable medida - Definición operativa
Etapas de Construcción de un instrumento de
medición
3. Especificaciones del instrumento de medida
- Requerimientos de administración
- Tipo, número, longitud, formato, contenido y distribución de los ítems
- Especificaciones e instrucciones en la entrega del material
- Aspectos de seguridad
4. Construcción de los ítems
- Directrices para la construcción de ítems de elección múltiple
- Principios generales para la construcción de ítems
5. Producción, base de datos, normas de puntuación y corrección
- Composición - Edición
Etapas de Construcción de un instrumento
de medición
6. Estudio piloto cualitativo y cuantitativo
- Selección de la muestra piloto (cualitativo y cuantitativo)
- Análisis y resultados del estudio piloto (cualitativo y cuantitativo) - Depuración, revisión, modificación o construcción de ítems
- Producción de una nueva versión del instrumento de medida
7. Selección de otros instrumentos de medida convergentes
- Obtener información convergente
Etapas de Construcción
8. Estudio de campo
- Selección y tamaño de la muestra y tipo de muestreo
- Administración del instrumento de medida
- Control de calidad y seguridad de la base de datos
9. Estimación de las propiedades métricas
- Análisis de ítems (cualitativo y cuantitativo) - Dimensionalidad
- Estimación de la fiabilidad
- Obtención de evidencias de validez
- Tipificación
10.Versión definitiva, informe final y manual del instrumento de medida
- Prueba fina propuesta
Para elaborar un instrumento de medición válido y confiable es
recomendable seguir los siguientes pasos:
1. Determinar cuál es la variable que se desea medir.
2. Definir la variable.
3. Determinar indicadores válidos de la variable
4. Seleccionar una muestra de esos indicadores.
5. Estructurar el Instrumento
Validez
Una variable en cuestión, nunca se debe observar con subjetivismo, ni caer en aproximaciones, ya que es muy común que el investigador , no profundiza sobre la complejidad que desea medir y al no conocer la variable que se desea medir, puede caer en instrumentos de medición no validos.
Es el grado en que un instrumento realmente mide la variable que desea medir.
¿Qué es lo que quiero
medir?
¿Cuál es la variable que quiero analizar,
estudiar o descomponer? ¿Qué tipo de
Evidencias de Validez
Validez de contenido
Validez de criterio
Validez de contenido
•Se da cuando el instrumento de medición contiene
representados en sí, todos los ítems del dominio y no solo
los elementos del contenido.
• El instrumento debe contener todos los aspectos o ítems del dominio de la
variable que se esta midiendo, y se construye de acuerdo con la teoría.
Ejemplo de baja validez de contenido
Veamos un ejemplo sobre empleo, donde generalmente se utiliza la validez de contenido.
Una escuela quiere contratar a un nuevo profesor de ciencias y un panel de directores comienza a analizar a los distintos candidatos. Elaboran una lista acotada y luego
diseñan una prueba, donde escogen al candidato con la mejor puntuación. Lamentablemente, éste demuestra ser un maestro de ciencias extremadamente mediocre.
Después de ver la prueba, la junta de educación comienza a ver en qué se equivocó. La gran mayoría de las preguntas fueron sobre física entonces, obviamente, la escuela encontró al mejor profesor de física.
Sin embargo, estaban buscando que el profesor de ciencias enseñara biología,
química y psicología. La validez de contenido de la prueba fue pobre y no representó plenamente el constructo de "ser un buen profesor de ciencias".
Avergonzada, la escuela rediseñó la prueba y la sometió a un panel de expertos en educación. Después de pedirles a los candidatos que completaran el nuevo examen, la escuela encontró a otra persona que demostró ser una profesora de ciencias
Validez de criterio
•Es una comparación entre nuestra situación de medida y un
estándar al que se le llama criterio.
•Es disponer de otra situación de la que conozco su validez. Pero se
requiere de consenso entre la comunidad científica, se trabaja en
relación al criterio.
validez de criterio concurrente:
validez de criterio predictiva:
Por ejemplo, probar la inteligencia de un
grupo de estudiantes por medio de un test de inteligencia y un par de días más tarde realizar una nueva prueba de inteligencia sería
perfectamente aceptable.
Si la prueba se lleva a cabo una cantidad de
Un constructo se refiere a una "construcción psicológica teórica".
La validez de constructo se refiere a si una escala o prueba mide el
constructo correctamente. Un ejemplo es la medición del cerebro humano,
como la inteligencia, el nivel de emoción, la competencia o la habilidad.
Algunos ejemplos específicos podrían ser el dominio de la lengua, la
capacidad artística o el nivel de agresión mostrado. Estos conceptos son
abstractos y teóricos, pero se han observado en la práctica.
Un ejemplo podría ser un médico que realiza pruebas sobre la eficacia de
los analgésicos en los enfermos crónicos de espalda.
La validez de constructo incluye tres etapas:
1.- Se establece y especifica la relación teórica entre los conceptos.
2.- Se correlacionan ambos conceptos y se analiza cuidadosamente la
correlación.
3.-Se interpreta la evidencia empírica de acuerdo a qué tanto clarifica la
validez de constructo de una medición en particular.
Un instrumento puede ser fiable pero no valido, puede medir consistentemente un aspecto , más no medir lo que pretende medir.
VALIDEZ TOTAL DE VALIDEZ VALIDEZ DE CONTENIDO VALIDEZ DE CRITERIO VALIDEZ DE CONSTRUCTO
Confiabilidad
•Es la precisión o exactitud de un instrumento de evaluación. El
análisis de la confiabilidad busca que los resultados de un
cuestionario concuerden con los resultados del cuestionario en otra
ocasión. Métodos para determinarla:
Medida de estabilidad
Consistencia interna
Método de formas alternativas o paralelas
Con el mismo observador
Medida de estabilidad
test - retest
Un mismo instrumento de medición se aplica dos o mas
veces a un mismo numero de personas.
Medida de consistencia interna
Alfa de Crombach
Sirve para comprobar si el instrumento que se está evaluando
recopila información defectuosa o si se trata de un
instrumento fiable que hace mediciones estables y
consistentes.
Los ítems cuyos coeficientes de correlación son menores a 0,35 deben ser o recodificados reformulados o desechados (Cohen –Manion, 1990).
Interpretación
0.53 a menos 0.54 a 0.59 0.60 a 0.65 0.66 a 0.71 0.72 a 0.79 1.0
Confiabilidad nula Confiabilidad baja Confiable
Muy confiable
Excelente confiabilidad Confiabilidad perfecta
Alfa de Cronbach:
Método de formas alternativas o paralelas. En este procedimiento no se administra el mismo instrumento de medición, sino dos o más versiones equivalentes de éste. Las versiones son similares en contenido, instrucciones, duración y otras características. El instrumento es confiable si la correlación entre los resultados de ambas administraciones es significativamente positiva. Los patrones de respuesta varían poco entre las aplicaciones.
Con el mismo observador:
hay consistencia en el mismo observador .
Diferentes observadores:
•
La improvisación
•
El no estar validados en el contexto donde se aplican.
•
El instrumento es inadecuado o no es empático.
•
El cuarto factor lo constituyen las condiciones en que se aplica el
instrumento.
•
El quinto factor se refiere a los aspectos mecánicos.
CONCLUSIONES
Un instrumento de medición si no es confiable ni valido, no consigue los objetivos de evaluación .
Si un instrumento de medición es confiable, pero no valido.
Podemos medir con precisión, pero si medimos el objeto incorrecto, la información obtenida no será válida para describir o explicar la población.