• No se han encontrado resultados

Exposicion Instrumentos de Medición.pdf

N/A
N/A
Protected

Academic year: 2020

Share "Exposicion Instrumentos de Medición.pdf"

Copied!
57
0
0

Texto completo

(1)

TEMA: INSTRUMENTOS DE MEDICION EN EL CAMPO DE

LA EVALUACIÓN

1. TIPOS DE INTRUMENTOS

2. ETAPAS DE CONSTRUCCION

3.

VALIDEZ

Y CONFIABILIDAD

(2)

Instrumentos de Medición en el campo de la

Evaluación

1) MEDICIÓN

Medir es averiguar la cantidad de una cosa, de un fenómeno, de una

característica o de un producto. Hay medición cuando se compara

una cosa cualquiera con otra que se ha elegido como unidad de medida. Ejemplo: Determinar en metros el largo de un salón, el peso

de una persona en kilogramos, el nivel de inteligencia de un alumno,

los resultados del aprendizaje mediante un test.

2) EVALUACIÓN

Evaluar es apreciar el valor de una cosa, de un fenómeno, de una característica o de un producto. Hay evaluación cuando decimos

que un alumno es deficiente o aprovechado, después de haber

medido el rendimiento de su aprendizaje mediante una prueba y

haber comparado el resultado con un criterio previamente establecido,

(3)

Instrumentos de Evaluación

La Observación

La Entrevista

Técnicas Sociométricas

Cuestionarios, Inventarios,

Test Pruebas de

Rendimiento Portafolios

(4)

LA OBSERVACIÓN

Instrumento

Tiene gran aplicabilidad en el proceso de evaluación, ya que proporciona información que permite realizar juicios de valor apropiados sobre las diferentes facetas

de la vida en el salón de clase.

No solo en forma individual, sino el grado de interacción de un grupo, características sociales, las

relaciones docente - estudiante y estudiante - estudiante. Para Lafourcade lo esencial en la elaboración de instrumentos y la aplicación de técnicas adecuadas, que enriquezcan la información

sobre aspectos de la conducta que se escapan a otros procesos de medición, estriba en la delimitación

de funciones.

PRODUCTO COMPORTAMIENTOS REPRESENTATIVOS

Habilidades

Hablar, escribir, escuchar, lectura oral, realizar experimentos en el laboratorio, dibujar, tocar un instrumento musical, bailar, gimnasia, habilidades de trabajo, habilidades de estudio y habilidades sociales.

Hábitos de trabajo

Efectividad en la planeación, uso del tiempo, uso de equipo, uso de recursos; la demostración de rasgos como la iniciativa, la capacidad creadora, la persistencia, la capacidad para infundir en otros la confianza en él.

Actitudes sociales

Preocupación por el bienestar de otros, respeto a las leyes, respeto a la propiedad ajena, sensibilidad ante las cuestiones sociales, preocupación por las instituciones sociales, deseo de trabajar en pro de la mejoría social

Actitudes científicas

Mente abierta, voluntad de detener todo juicio final, sensibilidad para las relaciones mecánicas, estéticas, científicas, sociales, recreativas, vocacionales.

Intereses

Sentimientos expresados con respecto a varias actividades educacionales, mecánicas, estéticas, científicas, sociales, recreativas, vocacionales.

Aprecios

Sensación de satisfacción y goce que se expresa con respecto a la naturaleza, la música, el arte, la literatura, la habilidad física, las contribuciones sociales notables.

Ajustes

(5)

Entre los principales instrumentos que el docente puede utilizar

para registrar los datos obtenidos mediante la observación se

encuentran

:

• Listas de cotejo.

• Escalas de clasificación o calificación.

• Entrevista

• Listas de corroboración • Registros de desempeño. • Pautas para medir productos. • Diario de campo.

(6)

Listas de Cotejo

Son listas de palabras, frases u

oraciones que expresan conductas

dicotómicas (sí - no, logrado - no

logrado y otras). Se emplean para

valorar aspectos específicos.

La lista proporciona información en

la que se señala si una

característica dada está presente

o no. Su mayor valor es ser fácil de

construir y aplicar, y objetiva

LAS ESCALAS DE CALIFICACIÓN:

 Es un conjunto de características o comportamientos por evaluar, de forma gradual. El docente debe especificar de antemano su atención en las características

previamente señaladas.

 Se pueden usar para evaluar procedimientos, productos finales y desarrollo personal.

 El docente usa la escala para indicar la cualidad, cantidad o nivel de lo observado.

Una escala de calificación sirve para varias funciones importantes:

 dirige la observación hacia aspectos específicos y claramente definidos.

 suministra un cuadro común de referencia para

comparar a todos los alumnos según el mismo conjunto de características.

(7)

Tipos de escalas:

Escala Numérica:

Consiste en una lista de números con claves: ambos permanecen constantes de un aspecto

a otro. Es uno de los tipos de escala más sencillos. El docente marca en las casillas correspondiente el

número que indica el grado hasta donde se presenta la característica

o rasgo que se ofrece en forma de indicador; se

asignan valores generalmente de 1 a 5, se utiliza una clave común de

5 excelente a 1 deficiente.

CRITERIOS

INDICADORES 5 4 3 2 1

Utiliza correctamente las formulas notables

Trabaja en orden los procedimientos

Interpreta adecuadamente los resultados

TOTAL

(8)

Escala Gráfica:

Implica una breve descripción del aspecto por observar. Se marca la opción que a criterio del observador, describe mejor

el aspecto.

Aunque la línea de la escala gràfica hace que sea posible calificar en puntos intermedios,

el uso de palabras solas para identificar la categorías no tienen gran ventaja sobre el uso

de números..

CRITERIOS INDICADORES Siempre FrecuenteMuy MenudoA Rara vez Nunca

Utiliza correctamente las formulas notables

Trabaja en orden los procedimientos

Interpreta adecuadamente los resultados

(9)

Escala Descriptiva:

Implica una descripción más amplia que la de la escala gráfica. Se emplea un orden gráfico. Se debe ser conciso, claro y utilizar términos observables.

A cada enunciando sigue una escala que represente con frases descriptivas los distintos grados del atributo en observación.

CRITERIOS INDICADORES

Utiliza correctamente las formulas notables

Trabaja en orden los procedimientos

Interpreta

adecuadamente los resultados

Nunca participa, es pasivo-callado

Participa tanto como cualquier otro miembro del grupo

Participa más que cualquier otro de los miembros del grupo

(10)

Escala de apreciaciones:

 Es un tipo de escala de calificación en la que se miden los distintos grados de un aspecto determinado.

 Para elaborar una escala de apreciaciones se siguen los siguientes pasos:

• determinar los indicadores

• escribir las instrucciones para su aplicación • ordenar los valores

• enunciar los indicadores

• indicar la forma de obtener la puntuación total.

(11)

ENTREVISTA:

Instrumento

 Es una técnica de observación que por medio de una conversación formal o informal el docente interactúa con el estudiante, permitiéndole profundizar en aspectos

relevantes, como opiniones preferencias, actitudes, intereses y otros La entrevista puede ser estructurada o no.

se recomienda una guía flexible que oriente la conversación.

 Las informales, es decir conversaciones durante el recreo o actividades extra clase, son fundamentales, ya que

brindan información importante,.

 La flexibilidad de la técnica, permite obtener datos imposibles de lograr por medio de otras técnicas, ya que,

independiente de lo que el alumno niegue o afirme, se puede observar como lo afirma o como lo niega (acento,

(12)

LISTAS DE CORROBORACIÓN

 La lista de corroboración es semejante en su forma y función a la escala de calificaciones. La diferencia básica entre ellas esta el tipo de juicio que se pide.

 Para elaborar una lista de corroboración para la evaluación de procedimientos deben tomarse en cuenta los siguientes aspectos.

 identificar y describir cada uno de los actos específicos que desea evaluar.

 añadir a la lista aquellos actos que representan errores comunes que puedan identificarse claramente.

 ordenar los comportamientos que de desean evaluar y los errores probables en el orden aproximado en que se espera que ocurran.

 proporcionar un procedimiento sencillo para numerar los comportamientos en secuencia o para tachar cada comportamiento según va ocurriendo.

 Además de usarse en la evaluación de procedimientos,

también puede utilizarse la lista de corroboración para evaluar productos. Para esto debe establecerse una lista de

(13)

REGISTRO DE DESEMPEÑO:

 Se utiliza en la evaluación formativa con el propósito de apreciar la forma como se ejecuta el aprendizaje de una destreza o habilidad y así poder realimentar el proceso. Para evaluar como se desarrollan las actividades y los resultados de ellas, ejemplo: el manejo de un aparato o un equipo. Para elaborar un registro de desempeño se siguen los siguientes pasos:

• establecer los aspectos importantes por observar

• establecer la secuencia de dichos pasos

• anotar las observaciones pertinentes

• obtener la puntuación total.

 Ejemplo:

 Nombre del estudiante_____________________________________________________

 Lugar donde se realiza la

observación______________________________________________________________

 Tiempo de observación__________________ Fecha ____________________________

(14)

Pautas para Evaluación de Productos y Diario de Campo

PAUTAS PARA LA EVALUACIÓN DE PRODUCTOS:

 Las acciones educativas persiguen la obtención

de resultados visibles de la actividad individual o grupal como por ejemplo un informe escrito, un periódico mural, etc., en donde el alumno pueda tener una referencia para saber qué no estuvo bien de su trabajo y qué hacer para mejorarlo. Para elaborar una pauta se siguen los siguientes pasos:

• establecer los aspectos que se deben tomar en

cuenta,

• establecer la escala en la cual se apreciará su

cumplimiento.

EL DIARIO DE CAMPO:

 El diario de campo es un instrumento de

recopilación de datos, con cierto sentido íntimo, que implica la descripción detallada de acontecimientos, y se basa en la

observación directa de la realidad; por eso se denomina "de campo".

 Para el docente, el diario de campo es un

instrumento de reflexión y análisis del

trabajo de aula y la realidad en la cual está inmersa la institución, que permite la

(15)

REGISTRO ANECDÓTICO.

Observado... Fecha...

Hora...

Observador... Lugar...

Contexto, situación: Durante una clase de educación física

Incidente, anécdota: El observado, tras un intercambio de palabras con un compañero suyo, le agrede verbalmente, le amenaza, se marcha violentamente de la clase, anunciando que los amigos de su pandilla tendrán conocimiento de lo que allí se ha hablado.

Observaciones: Sus compañeros no le dieron demasiada importancia, siguieron como si no hubiera sucedido nada importante, incluso el amenazado dijo: no os preocupéis, no hará nada.

Las técnicas más habituales son:

1.- Los anecdotarios: Sirven para recoger de forma episódica los hechos más sobresalientes que se producen en el desarrollo de una determinada acción relativa al campo de las aptitudes, de las actitudes, de los intereses, de las reacciones temperamentales, de sociabilidad o de

cualquier otro tópico que nos interese. No debe recoger opiniones ni juicios de valor debe exclusivamente describir los hechos o las acciones.

Los pasos a seguir serían: seleccionar al campo de observación (clase, taller; oficina, relaciones informales, bar, hogar...), seleccionar los observados (todos, sólo algunos), tiempo (un día, una semana, un

mes), elaborar una ficha de registro más o menos estandarizada, registrar las observaciones, archivarlas. Cada anécdota debe plasmarse

(16)

Instrumentos de Medición

2.- Los diarios y los informes

Constituyen unos instrumentos de

recogida de información que pueden ser más o menos sistematizados.

Pueden oscilar desde una simple relación o enumeración de

actividades realizadas o pueden estar ya estructurados y referidos a campos concretos e incluir valoraciones,

pensamientos, reflexiones.

3.- Listas de control.

Son listados enumerativos, la mayoría de las veces bastante largos, de conductas abiertas o ya determinadas con las que el observador debe estar habituado. En ellas debe anotar si tal conducta, comportamiento, hábito, costumbre,...

aparece, se manifiesta, o no. Exigen una buena preparación por parte del observador; grandes dotes de observación y mucho tiempo, no admite matizaciones. Pueden dirigirse las observaciones y las anotaciones tanto a grupos como individualmente.

Modelo (Identificación (nombre o grupo observado)

(Señale con una X la columna correspondiente) SI NO

Respecto a su cumplimiento

Es puntual a la hora de iniciar el trabajo Es puntual a la hora de finalizar el trabajo Busca excusas para abandonar el trabajo Entabla conversaciones innecesarias

Respecto a sus compañeros

Siempre está dispuesto a ayudar Es sincero

Se muestra alegre

Presta sus herramientas o útiles de trabajo

Respecto a sus superiores

Es sumiso

Busca las razones de las órdenes Es respetuoso

(17)

Escalas de valoración

Estas escalas son prácticamente las mismas que las de control, si bien en ellas se pueden incluir matizaciones respecto al grado de acuerdo o desacuerdo, existencia o no de una determinada cuestión, comportamiento, etc. Son clásicas las escalas de Likert, Thurstone, Osgood y Guttman.

Escalas de Likert o de puntuaciones sumadas.

Permiten la cualificación y la cuantificación, su presentación puede ser

descriptiva, gráfica o numérica. La escala en

su totalidad sería un listado de ítems, preguntas o gráficos

referidos a todos los aspectos Contemplados en dicha escala.

Modelo

Descriptivo

Muy de

Acuerdo En Desacuerdo Sencillamente de Acuerdo Muy de Acuerdo

(18)

Las escalas de Thurstone

Suponen, para quien las elabore, realizar una lista de rasgos respecto a un aspecto, persona o fenómeno, en la que el primer ítem encierre una descripción o

calificación excelente y el último una descripción o calificación muy negativa y en medio unos quince o veinte niveles intermedios ordenados progresivamente.

La lista así elaborada se da para ser respondida a las personas escogidas por

la muestra. Su respuesta se limita a señalar la frase con la que está más de

acuerdo, una vez leídas todas. Su construcción es bastante complicada,

redacción de ítems, graduarlos, nivelarlos.

 (Lea todas estas afirmaciones y señale aquella -una- con la que se sienta más

Identificado(a)).

 1.-El trabajo para el hombre es el mayor bien del que puede gozar, una bendición.

 4.-El trabajo es una fuente de satisfacciones.  10.-El trabajo es un medio para poder subsistir.  15.-El trabajo, si no existiera mejor.

(19)

Las escalas de Osgood

Al igual que las anteriores sirven para acceder a determinadas informaciones, que por otros medios serían difícil de alcanzar; sus datos pueden ser analizados comparativamente, para establecer procesos de seguimiento o

evolución, etc. Al igual que las escalas de Likert, pueden presentar distintos grados o niveles en las matizaciones. Normalmente se establecen grados impares (3, 5 ó 7 posibilidades de respuesta) para mejor ajuste a las curvas de normalidad (Gauss), aunque también pueden establecerse niveles pares (2,4, 6 u 8 opciones de respuesta) si nos interesa detectar Informaciones fácilmente

dicotomizables, del tipo «buenos» «malos», «cumplidores» «no cumplidores»,«rápidos» «lentos»,

Modelo

Tópico: Mi lugar de trabajo es...

 Agradable 6 5 4 3 2 1 Desagradable

 Diverso 6 5 4 3 2 1 Monótono

 Acogedor 6 5 4 3 2 1 Frío

 Seguro 6 5 4 3 2 1 Peligroso

Tópico: Mi superior es...

 Simpático 7 6 5 4 3 2 1 Antipático

 Justo 7 6 5 4 3 2 1 Injusto

 Locuaz 7 6 5 4 3 2 1 Parco

 Nervioso 7 6 5 4 3 2 1 Tranquilo

 Cordial 7 6 5 4 3 2 1 Hostil

(20)

Las escalas de Guttman

son otro tipo de escalas, apropiadas para evaluar actitudes, aunque también

pueden ajustarse a otros requerimientos. Son escalas acumulativas, puesto que la

primera respuesta debe incluir a las restantes. Son bastante complicadas de formular si se quiere respetar

esa condición en algunos casos. Pueden dirigirse a varios campos de estudio o

ser monográficas.

 (Señale con X las respuestas correctas, o con las que esté más de acuerdo, puede responder a más de una. En otros casos resuelva los problemas que se le plantean).

 1. ¿Cuántos días tiene de vacaciones al año?

 Mas de treinta

 Entre quince y treinta

 Menos de quince

 2. ¿Cuántos días de sus vacaciones pasa fuera de su residencia habitual?

 Más de treinta

 Entre veinte y treinta

 Entre diez y diecinueve

 Menos de diez

 1. Respecto a sus compañeros de trabajo cree que

 Todos son buenos

 La mayoría son buenos

 Sólo algunos lo son

 2. Respecto a sus superiores

 Todos son muy competentes

 La mayoría lo son

 Solamente algunos

 (Señale con X las respuestas correctas, o con las que esté más de acuerdo, puede responder a más de una. En otros casos resuelva los problemas que se le plantean).

 1. ¿Cuántos días tiene de vacaciones al año?

 Mas de treinta

 Entre quince y treinta

 Menos de quince

 2. ¿Cuántos días de sus vacaciones pasa fuera de su residencia habitual?

 Más de treinta

 Entre veinte y treinta

 Entre diez y diecinueve

 Menos de diez

 1. Respecto a sus compañeros de trabajo cree que

 Todos son buenos

 La mayoría son buenos

 Sólo algunos lo son

 2. Respecto a sus superiores

 Todos son muy competentes

 La mayoría lo son

(21)

Las escalas de

producción.

Evaluar por escalas de producción supone llevar a cabo comparaciones de trabajos realizados con modelos o escalas graduados lo cual posibilita la

localización de un determinado trabajo en un nivel determinado que le

es adjudicado en función de las coincidencias o similitudes con un nivel

de esa escala. Por ejemplo, algunos modelos existentes para valorar la escritura. En algunos casos, existen escalas de producción publicadas e incluso tipificadas, pero en otros deben

construirse a partir de las propias producciones de los alumnos de

acuerdo con unos criterios.

Nivel de producción 1: Realismo, colorido, profundidad, sombreado y detalles.

Nivel de producción 2: Realismo, detalles, colorido y sombreado.

Nivel de producción 3: Realismo, bastantes detalles, colores no bien logrados y falta de profundidad.

(22)

CUESTIONARIOS, INVENTARIOS Y TEST

Los cuestionarios son unos instrumentos que permiten la recogida rápida y

abundante de información respecto a los temas más variados, tanto tomados de forma aislada, como conjunta. Los

cuestionamos pueden ser monotemáticos o politemáticos según intenten cercar un objeto de estudio desde varias

problemáticas. Son presentaciones escritas en las que el sujeto anota sus apreciaciones. Se presentan en forma abierta o cerrada; en el primer caso puede escribirse lo que se quiera, en el segundo caso, quien responde al

cuestionario debe ceñirse a las respuestas que se le ofrecen.

(Cuestionario sobre el ambiente de trabajo, Escriba o señale con X donde corresponda)

 1.-Exponga brevemente cómo percibe el ambiente donde usted trabaja (Pregunta abierta)

 5.-Retiraría usted los ceníceros de las mesas de trabajo en aquellas salas donde trabajaran más de uno:

 SI NO (Pregunta cerrada)

 10.-Si el ambiente de su trabajo no es del todo bueno ¿a qué cree que se debe? (Puede señalar más de una):

 Al mucho trabajo que hay.

 Siempre se va con prisas.

 No hay buenas relaciones con los jefes.

 No hay buenas relaciones con los compañeros.

 Existe mucha competitividad interna.

(23)

Los Inventarios

Los inventarios son un tipo especial de cuestionarios; se diferencian en que tienen

una presentación mucho más

estandarizada y reiterativa; algunos de ellos, con el tratamiento y requisitos necesarios, se convierten en test de personalidad, test de

intereses actitudinales, aptitudinales y vocacionales.

Los ítems se prestan a varias formalizaciones pero las más usuales responden al siguiente

esquema: Ante distintas afirmaciones se debe contestar en la casilla del SI, del NO o

de una casilla con ?, que significa una posición dudosa, ambivalente...

Modelo

Se considera una persona cumplidora SI NO ?

Se considera una persona ambiciosa SI NO ?

(24)

Los Test

Los Test son pruebas de evaluación de la más diversa índole. Existen test de aptitudes mentales: inteligencia, memoria, atención, etc; de personalidad; de intereses

vocacionales; de instrucción, etc. Todos ellos se configuran a partir de una serie de preguntas o tareas

las cuales una vez respondidas o realizadas permiten ser puntuadas y establecer categorías en base a las diferencias individuales, la mayoría de las veces según

criterios y requisitos estadísticos rigurosos

(25)

EL PORTAFOLIOS (Carpeta) y el Cuaderno de Clase

El Portafolios.

Señala que la evaluación por portafolios, también llamada

evaluación por carpetas, consiste en una colección de trabajos de los alumnos que busca demostrar, por medio de la mejora

progresiva, lo que son capaces de hacer en un área o contenido específico.

Se trata de un conjunto particular de selecciones de actividades y trabajos que recoge, entre otras, las mejores producciones de los alumnos,

Este sistema de evaluación no se presenta como una forma

alternativa de valoración de los aprendizajes escolares, sino como un complemento

El cuaderno de clase

es un instrumento muy extendido en los centros escolares y resulta de gran utilidad para la evaluación formativa.

No es un a prueba de evaluación en sentido estricto ya que no supone un trabajo adicional para el alumno, ya que simplemente recoge el trabajo de

cada día, tanto el de clase como el desarrollado en casa. El cuaderno de

clase, además de un instrumento personal del alumno, es un medio de

comunicación, cuya eficacia dependerá del nivel de colaboración que el profesor promueva en los textos

(26)

LAS TÉCNICAS SOCIOMÉTRICAS

Las técnicas sociométricas tienen como finalidad el obtener información acerca de la

posición de los individuos dentro de un grupo así como de las relaciones que entre ellos se

establecen. Son técnicas que permiten conocer y evaluar situaciones personales o grupales en temas tales como: participación,

liderazgo, aceptación, rechazo, etc.

El sociograma se aplica a grupos con una cierta estabilidad y continuidad. No es útil cuando se trate de grupos inestables, de poca duración y de escaso conocimiento

entre ellos

Determinar la situación sociométrica. Debe ser distinta para cada caso, aunque se

mantengan ciertas constantes. No es la misma situación la que se brinda si la pregunta se

refiere a jugar a trabajar; a divertirse, a estudiar, etc. Suelen distinguirse tres campos:

de la afinidad (por igualdad de intereses), el de la efectividad (por la seguridad de alcanzar un objetivo) y el de la afectividad

(27)

PRUEBAS AUTOMATIZADAS

(28)

LAS PRUEBAS DE RENDIMIENTO

Los exámenes

Los exámenes permiten a los alumnos elaborar sus respuestas de acuerdo con sus conocimientos y estilo

personales. Gracias a ellos se puede comprobar directamente la calidad y las características de las respuestas, su profundidad y los procesos mentales implícitos en ellas. Puede detectarse aspectos tales como. el dominio terminológico, la fluidez verbal , el nivel léxico,

la sistematización del discurso las estructuras

conceptuales, las fuentes de conocimiento, el manejo de técnicas, la originalidad y creatividad.

Las ventajas de los exámenes radican en la facilidad de su elaboración y bajo costo, en permitir una elaboración de respuestas personales, en la gran cantidad de información que puede recogerse, y en que permiten preguntar a todos

(29)

Exámenes Orales

Los exámenes orales

Pueden presentar un mayor o menor nivel de estructuración (rigidez de la técnica en sí); piénsese en un examen oral que

consiste en dar contestaciones a un cuestionario cerrado previamente preparado por el profesor; o en la evaluación de

un debate participativo. Las formas de un examen oral según Rodríguez Diéguez (l980) son:

a) Desarrollo oral de un tema sacado a suerte o elegido por el profesor.

b) Tema elegido por el alumno.

Ambas formas pueden permitir su realización con tiempo de preparación o sin él. Realizarse de forma autónoma y

enteramente personal o con realización de preguntas por parte del profesor

c) Interrogatorio efectuado por el profesor.

d) Debate entre alumnos, tanto individuales como grupales. e) Entrevistas con diferentes grados de estructuración. f) Ponencias o presentación de trabajos preparados

(30)
(31)
(32)
(33)
(34)
(35)
(36)

Etapas de Construcción de un instrumento de medición

 ETAPAS DE CONSTRUCCION DE UN INSTRUMENTO DE MEDIDA

1. Marco general del instrumento de medida

 - Justificación y motivación

 - Contexto de aplicación

 - Uso e interpretación de las puntuaciones

2. Definición operativa de la variable medida  - Definición operativa

(37)

Etapas de Construcción de un instrumento de

medición

3. Especificaciones del instrumento de medida

 - Requerimientos de administración

 - Tipo, número, longitud, formato, contenido y distribución de los ítems

 - Especificaciones e instrucciones en la entrega del material

 - Aspectos de seguridad

4. Construcción de los ítems

 - Directrices para la construcción de ítems de elección múltiple

 - Principios generales para la construcción de ítems

5. Producción, base de datos, normas de puntuación y corrección

 - Composición  - Edición

(38)

Etapas de Construcción de un instrumento

de medición

6. Estudio piloto cualitativo y cuantitativo

 - Selección de la muestra piloto (cualitativo y cuantitativo)

 - Análisis y resultados del estudio piloto (cualitativo y cuantitativo)  - Depuración, revisión, modificación o construcción de ítems

 - Producción de una nueva versión del instrumento de medida

7. Selección de otros instrumentos de medida convergentes

 - Obtener información convergente

(39)

Etapas de Construcción

8. Estudio de campo

 - Selección y tamaño de la muestra y tipo de muestreo

 - Administración del instrumento de medida

 - Control de calidad y seguridad de la base de datos

9. Estimación de las propiedades métricas

 - Análisis de ítems (cualitativo y cuantitativo)  - Dimensionalidad

 - Estimación de la fiabilidad

 - Obtención de evidencias de validez

 - Tipificación

10.Versión definitiva, informe final y manual del instrumento de medida

 - Prueba fina propuesta

(40)

Para elaborar un instrumento de medición válido y confiable es

recomendable seguir los siguientes pasos:

1. Determinar cuál es la variable que se desea medir.

2. Definir la variable.

3. Determinar indicadores válidos de la variable

4. Seleccionar una muestra de esos indicadores.

5. Estructurar el Instrumento

(41)

Validez

Una variable en cuestión, nunca se debe observar con subjetivismo, ni caer en aproximaciones, ya que es muy común que el investigador , no profundiza sobre la complejidad que desea medir y al no conocer la variable que se desea medir, puede caer en instrumentos de medición no validos.

Es el grado en que un instrumento realmente mide la variable que desea medir.

¿Qué es lo que quiero

medir?

¿Cuál es la variable que quiero analizar,

estudiar o descomponer? ¿Qué tipo de

(42)

Evidencias de Validez

Validez de contenido

Validez de criterio

(43)

Validez de contenido

•Se da cuando el instrumento de medición contiene

representados en sí, todos los ítems del dominio y no solo

los elementos del contenido.

(44)

• El instrumento debe contener todos los aspectos o ítems del dominio de la

variable que se esta midiendo, y se construye de acuerdo con la teoría.

(45)

Ejemplo de baja validez de contenido

Veamos un ejemplo sobre empleo, donde generalmente se utiliza la validez de contenido.

Una escuela quiere contratar a un nuevo profesor de ciencias y un panel de directores comienza a analizar a los distintos candidatos. Elaboran una lista acotada y luego

diseñan una prueba, donde escogen al candidato con la mejor puntuación. Lamentablemente, éste demuestra ser un maestro de ciencias extremadamente mediocre.

Después de ver la prueba, la junta de educación comienza a ver en qué se equivocó. La gran mayoría de las preguntas fueron sobre física entonces, obviamente, la escuela encontró al mejor profesor de física.

Sin embargo, estaban buscando que el profesor de ciencias enseñara biología,

química y psicología. La validez de contenido de la prueba fue pobre y no representó plenamente el constructo de "ser un buen profesor de ciencias".

Avergonzada, la escuela rediseñó la prueba y la sometió a un panel de expertos en educación. Después de pedirles a los candidatos que completaran el nuevo examen, la escuela encontró a otra persona que demostró ser una profesora de ciencias

(46)

Validez de criterio

•Es una comparación entre nuestra situación de medida y un

estándar al que se le llama criterio.

•Es disponer de otra situación de la que conozco su validez. Pero se

requiere de consenso entre la comunidad científica, se trabaja en

relación al criterio.

validez de criterio concurrente:

validez de criterio predictiva:

Por ejemplo, probar la inteligencia de un

grupo de estudiantes por medio de un test de inteligencia y un par de días más tarde realizar una nueva prueba de inteligencia sería

perfectamente aceptable.

Si la prueba se lleva a cabo una cantidad de

(47)

Un constructo se refiere a una "construcción psicológica teórica".

La validez de constructo se refiere a si una escala o prueba mide el

constructo correctamente. Un ejemplo es la medición del cerebro humano,

como la inteligencia, el nivel de emoción, la competencia o la habilidad.

Algunos ejemplos específicos podrían ser el dominio de la lengua, la

capacidad artística o el nivel de agresión mostrado. Estos conceptos son

abstractos y teóricos, pero se han observado en la práctica.

Un ejemplo podría ser un médico que realiza pruebas sobre la eficacia de

los analgésicos en los enfermos crónicos de espalda.

(48)

La validez de constructo incluye tres etapas:

1.- Se establece y especifica la relación teórica entre los conceptos.

2.- Se correlacionan ambos conceptos y se analiza cuidadosamente la

correlación.

3.-Se interpreta la evidencia empírica de acuerdo a qué tanto clarifica la

validez de constructo de una medición en particular.

(49)

Un instrumento puede ser fiable pero no valido, puede medir consistentemente un aspecto , más no medir lo que pretende medir.

VALIDEZ TOTAL DE VALIDEZ VALIDEZ DE CONTENIDO VALIDEZ DE CRITERIO VALIDEZ DE CONSTRUCTO

(50)

Confiabilidad

•Es la precisión o exactitud de un instrumento de evaluación. El

análisis de la confiabilidad busca que los resultados de un

cuestionario concuerden con los resultados del cuestionario en otra

ocasión. Métodos para determinarla:

Medida de estabilidad

Consistencia interna

Método de formas alternativas o paralelas

Con el mismo observador

(51)

Medida de estabilidad

test - retest

Un mismo instrumento de medición se aplica dos o mas

veces a un mismo numero de personas.

(52)

Medida de consistencia interna

Alfa de Crombach

Sirve para comprobar si el instrumento que se está evaluando

recopila información defectuosa o si se trata de un

instrumento fiable que hace mediciones estables y

consistentes.

(53)

Los ítems cuyos coeficientes de correlación son menores a 0,35 deben ser o recodificados reformulados o desechados (Cohen –Manion, 1990).

Interpretación

0.53 a menos 0.54 a 0.59 0.60 a 0.65 0.66 a 0.71 0.72 a 0.79 1.0

Confiabilidad nula Confiabilidad baja Confiable

Muy confiable

Excelente confiabilidad Confiabilidad perfecta

Alfa de Cronbach:

(54)

Método de formas alternativas o paralelas. En este procedimiento no se administra el mismo instrumento de medición, sino dos o más versiones equivalentes de éste. Las versiones son similares en contenido, instrucciones, duración y otras características. El instrumento es confiable si la correlación entre los resultados de ambas administraciones es significativamente positiva. Los patrones de respuesta varían poco entre las aplicaciones.

Con el mismo observador:

hay consistencia en el mismo observador .

Diferentes observadores:

(55)

La improvisación

El no estar validados en el contexto donde se aplican.

El instrumento es inadecuado o no es empático.

El cuarto factor lo constituyen las condiciones en que se aplica el

instrumento.

El quinto factor se refiere a los aspectos mecánicos.

(56)
(57)

CONCLUSIONES

Un instrumento de medición si no es confiable ni valido, no consigue los objetivos de evaluación .

Si un instrumento de medición es confiable, pero no valido.

Podemos medir con precisión, pero si medimos el objeto incorrecto, la información obtenida no será válida para describir o explicar la población.

Referencias

Documento similar

Debido al riesgo de producir malformaciones congénitas graves, en la Unión Europea se han establecido una serie de requisitos para su prescripción y dispensación con un Plan

Como medida de precaución, puesto que talidomida se encuentra en el semen, todos los pacientes varones deben usar preservativos durante el tratamiento, durante la interrupción

Este estudio desarrolló el proceso de validez facial y de contenido de la escala Critical Care Family Needs Inventory versión breve (30), que permite identificar las necesidades de

El contar con el financiamiento institucional a través de las cátedras ha significado para los grupos de profesores, el poder centrarse en estudios sobre áreas de interés

La gestión del esfuerzo pesquero, basado en la dis- tribución de cuotas o posibilidades de pesca atribuidas a nuestra flota, se instrumenta fundamentalmente mediante medidas

Fuente de emisión secundaria que afecta a la estación: Combustión en sector residencial y comercial Distancia a la primera vía de tráfico: 3 metros (15 m de ancho)..

La campaña ha consistido en la revisión del etiquetado e instrucciones de uso de todos los ter- mómetros digitales comunicados, así como de la documentación técnica adicional de

The used instrument was the scale of causes of attrition from sports centres (Nuviala et al. For its design, three different phases were followed: 1) Bibliographical research