TUTORIA TÉCNICAS Y PEDAGOGÍA 11 NOVIEMBRE 2021
OBJETIVO DE LA ASIGNATURA: TÉCNICAS I
- Las técnicas su conocimiento y uso sólo cobran sentido dentro de una investigación.
- Cada técnica tiene una lógica. Hay que saber diferenciarlas y compararlas. Hay que saber
sus límites, sus posibilidades y los problemas que surgen de su aplicación.
Ideas Esenciales del tema I
- Para qué sirve la Investigación Social
- Nivel tecnológico del conocimiento
- Qué son las técnicas de Investigación social
- La deficiencia de reducir las técnicas a sólo procedimientos
¿Para que sirve la INVESTIGACIÓN SOCIAL?
- Se aprende a comprender mejor el significado de un hecho o de un comportamiento.
- Se aprende a delimitar el meollo de una situación.
- Se aprende a captar hasta el más mínimo detalle de la lógica de funcionamiento de una organización o
colectivo.
- A reflexionar con rigor sobre las implicaciones de una decisión política.
- Se aprende a comprender más claramente cómo ciertas personas entienden un problema y también a esclarecer algunos de los fundamentos de sus concepciones.
- "…todo lo anterior amerita tiempo y formación. Además raramente se lograrán investigaciones que contribuyan a hacer progresos en los marcos conceptuales de las ciencias sociales, sus modelos de análisis o sus estructuras metodológicas….*” pero pueden ser valiosos para explicar hechos y fenómenos de los actores sociales
* Quivy, R. Manual de investigación en ciencias sociales, edit Limusa, Mexico 2009
1. NIVELES DEL CONOCIMIENTO
NIVEL DE CONOCIMIENTO PREGUNTA
Ontológico ¿Qué es la realidad social?
Epistemológico ¿Qué puede conocerse de la realidad social?
Metodológico ¿Qué medio o camino ha de utilizarse para conocer
la realidad social que puede conocerse?
Tecnológico ¿Cómo se utilizan las técnicas de observación para
desarrollar el camino que conduce a conocer la realidad
social que puede conocerse?
2.1. LAS TÉCNICAS DE INVESTIGACIÓN
- El término técnica procede del griego tejne: guía a la acción práctica. El carácter práctico se desarrolla en dos sentidos:
- Hacia el interior: las técnicas son prácticas.
- Hacia el exterior: han de ser prácticas en el sentido de que han de servir para algo.
2.2. LAS TÉCNICAS DE INVESTIGACIÓN
GOODE Y HATT (1970) las definen como:
- “los procedimientos específicos a través de los cuales se reune y ordenan los datos antes de someterlos a análisis”.
GARCÍA FERRANDO (1979:119) las define como:”procedimientos específicos a través de los cuales se reúne y ordena los datos antes de someterlos a la operaciones lógicas o estadísticas”.
2.3. LAS TÉCNICAS DE INVESTIGACIÓN
Callejo Gallego: “las TIS son prácticas de reducción de la complejidad de lo social, aportando a la investigación referencias de la experiencia construida procedimentalmente”
Para que le sirven al sociólogo/a las técnicas de investigación social?
- Utiliza la observación científica para aproximarse, aprehender, conocer, analizar la realidad social. El conocimiento y la práctica de los procedimientos de investigación social son la base del sociólogo
2.4. LAS TÉCNICAS DE INVESTIGACIÓN
Más que como prácticas, las técnicas de investigación han sido definidas como procedimientos. Procedimientos más ligados al registro de observaciones, que al análisis.
Es preferible denominar a las técnicas , PRÁCTICAS de investigación social porque en las anteriores se evoca un uso mecánico, lo que no describe lo que hace el observador que no hace un trabajo mecánico o uso mecánico de las técnicas sino que marca CÓMO QUIERE CONOCER
3. LA LÓGICA PRÁCTICA DE LAS TÉCNICAS DE INVESTIGACIÓN
Las técnicas son prácticas no instrumentos, por ejemplo: la técnica no es el cuestionario sino la realización del mismo.
Su función es aportar bases para cierta certeza pero no para LA certeza. Sirven para aportar información a la investigación.
4. LA RELACIÓN ENTRE TÉCNICAS Y TEORÍA
La dependencia de las técnicas de la teoría es doble:
- Dependencia externa: la teoría reduce la complejidad de lo social a un modelo.
- Dependencia interna: la teoría también es la fuente que da sentido a la técnica, ya sea generándola, ya sea justificándola. Ejemplos: el socioanálisis, técnicas de selección de muestras para encuestas
Este primer capítulo intenta articular las dos operaciones centrales de lo que llamamos ciencia. Para que haya ciencia tiene que haber:
- Reducción de la realidad observada
- Observación de la observación (p.p 24 y 25)
5.- ¿QUÉ ES UN DATO?
- Es un producto de la observación consensuado en la ciencia. Es decir, es un registro de la observación y por lo tanto pertenece al sistema de la observación y no se le llama realidad.
TEMA LA OBSERVACIÓN
1.- DESDE LA SOCIOLOGÍA
Observar la realidad social
- Observación participante
- Identificación vs reflexión: gradientes
- Diseño de observación participante
- Uso observación visual en la observación participante
2.- DESDE LA PEDAGOGÍA
- Definición de observación
- El observador
- Tipos y unidades de observación
- Proceso de observar
- Técnicas registro datos observación
- Unidades medida
- Análisis fiabilidad y validez: acuerdo entre observadores y observaciones
- Análisis de datos
Observar no es mirar, observamos con todos los sentidos
- Observar es incrementar la información (observar … clasificar). Observar basura y estudiar consumo familia
- Utilización otras técnicas complementarias (encuesta, grupos de discusión, entrevista)
• Técnicas reactivas (entrevista) vs no reactivas (observación)
• Aproximación y profundización garantía información: información no participante (limitaciones sensoriales) y participante
4.- DEFINICIÓN
Proceso sistemático (planificado) y controlado (se somete a garantías fiabilidad y validez)
• Recogida información en contexto natural o ficticio
• Interviene observador, instrumento registro y situación observada
• Elementos (Bunge): objeto observación, sujeto observador, circunstancias contexto, medios observación, cuerpo conocimientos que forman parte de investigación
• Expresión y comunicación, dominio psicomotriz, actitudes e intereses
5.- EL OBSERVADOR
- Reactividad y adaptabilidad. Objetividad.
- Conocedor temática
- Imparcialidad
- Actitud alerta y activa, capacidad perceptiva
- Habilidades comunicativas
- Empatía
- Capacidad de autocrítica
6.- TIPOS DE OBSERVACIÓN
- Sistematización o control
- Ocasional o no controlada, primera aproximación, descripción narrativa
- Observación sistematizada o controlada, utilización elementos auxiliares (fotos, audios), cuantificación datos, grupos pequeños
- Grado participación observador
- Observación interna o participante, cualitativa, categorías análisis emergentes, complejidad capacidad investigador atención, reflexión y tiempo observación
- Observación externa, racionalista, plan, posible grabar, variables medibles y cuantificables
- Observador externa, sistemática, ordenada
- Observador participante, evita reactividad
- Observador entre observados, participa del medio, se transforma en uno más, conoce el comportamiento en condiciones naturales
- Investigador se adentra un tiempo largo en un grupo social determinado, interacciona con miembros, descubre acciones y comprende motivaciones.
- Tiempo largo
- Ambiente natural
- Interacción social con miembros
- Fin: descubrir acciones y comprender motivaciones
- Mediante proceso identificación
- Exposición personal y directa investigadores a la alteridad sociocultural
- Técnicas: entrevista profundidad, uso documentos, hª vida
- Participar en la observación del otro desde dentro, a través de su visión de las cosas
- Técnica documental vs observación participante de documentos
- Visión y vivencia común, punto encuentro, participación en la vida del otro para pensar y sentir como él
- Recolección y registro de lo que la gente hace o piensa sobre sus propias acciones, creencias e ideas
- Malinowsky (1975)
- Descripción densa: observaciones + sfdo e interpretación
- Método Antropología
- Técnicas: entrevista en profundidad, uso documentos, cuaderno de campo (diario o libro de a bordo) e historia de vida
- Observación de otro desde dentro, a través de la visión de las cosas por parte de los otros, participa en visión del grupo y realidad que refieren, se identifica, piensa y siente como ellos
- Contraste información diversa y varias fuentes
- Convivencia, registro hechos manifestados por comunidad sobre propias acciones, creencias e ideas
- No necesidad convertir en nativos
- Observar punto vista de otros
- Observo + doto de significado + interpreto
- Interacción observador – realidad --> reflexión
- Participación especular (todo acto observaciones es un espejo)
- Proximidad para conocer desde dentro la visión de grupos humanos.
- Conocimiento diverso y diferente. Macroobservaciones, apertura mirada a información útil, y microobservaciones (conocimiento latente).
- Descripción imágenes ambientes o historia lugar.
- Producción imágenes descritas (interacciones formales e informales, e interpretación de los sujetos protagonistas en explicación imágenes).
- Entrada en el campo
- Evitar reacción artificiosa y falsa.
- Porteros (legitiman observador ante comunidad, le introducen en escena común).
- Informantes clave (ofrecen interpretación sobre escenarios o significado imágenes, imprimen manera particular de ver las cosas con mayor sesgo y filtran imágenes)
- Aplicaciones
- Fenómeno nuevo o desconocido.
- Diferencia manifestación externa e interna (sindicatos, partidos políticos).
- Fenómeno íntimo o privado (relación médico – paciente).
- Fenómeno oculto (grupos delictivos).
- MAYOR PROXIMIDAD/GRADO REFLEXIÓN ... MENOR PROXIMIDAD/GRADO
- AUTOOBSERVACIÓN / OBSERVACIÓN ACTIVA ... OBSERVACIÓN PARTICIPANTE ... PARTICIPACIÓN EN OBSERVACIÓN/OBSERVACIÓN PASIVA
- Propósito
- Uds observación, uds medida y muestra cdctas
- Continuo comportamiento global eventos conducta
- Atributos, características deducibles de evento observado, amplios espacios temporales
- Conducta manifiesta: motora o verbal, agrupadas en categorías, selección rigurosa intervalos tiempo
- Interacciones, relación secuencial, unidades tiempo establecidas
- Productos conducta, resultado actividades realizadas por sujetos
- Condiciones
- Observados, contexto, tiempo y duración sesiones, observadores
- Procedimiento de observación
- Determinar objetivo observación: ¿en qué consiste la conducta?
- Selección conductas a observar
- Conductas no verbales: faciales, gestos
- Cdcta espacial
- Cdcta extralingüística: intensidad, tono, timbre, silencios y utilización tiempo, tendencias dominio o interrupción, estilo verbal, articulación, fluidez
- Conductas lingüísticas: palabras, frases semánticas
- Técnicas registro datos
- Lista de control (presentes o no)
- Registro anecdótico (fecha, lugar, incidente e interpretación)
- Sistemas de rasgos (presencia y frecuencia)
- Escalas de estimación o apreciación (algunas tienen su nombre y las veremos en el tema de escalas)
- Numéricas (satisfacción situación económica) 1 … 5
- Gráficas (entrega tbjos a tiempo) CN N AV CS S
- Descriptiva (a ptuación se describe cdcta)
- Categorías observación
- Definición clara y precisa
- Exhaustivas, cualquier compt incluible en una categoría
- Disjuntas, no nexo común
- Dimensionalidad (puntos vista)
- Categorías continuas o discretas, jerarquía violencia juvenil
- Tamaño unidad (tiempo)
- Muestreo conducta
- Ad libitum (todo vale)
- No estructurado, al principio investigación, exploratorio
- Eventos conductuales (lista control)
- Cdctas prefijadas (nº veces aparición)
- Focal (cdctas objeto interés sujeto o grupo durante intervalo tiempo)
- Secuencias temporales
- Listas control (presencia / ausencia)
- EJEMPLO
- Se levanta sin permiso / se mueve en su sitio (piernas) / habla sin permiso / habla temas descontextualizados / agrede verbalmente / no trae tareas o las hace mal / agrede físicamente
- SI NO FREC Y DURACIÓN HORA
- INCIDENTE (Fecha, hora, espacio, suceso, causante, observadores, posible causa)
- DESCRIPCIÓN E INTERPRETACIÓN
- Observación de imágenes
- Imagen admite diversas interpretaciones.
- Observación busca comprensión acciones observadas, a partir interpretación de los otros, teniendo en cuenta lugar interpretador en estructura relacional.
- Observador produce imágenes para su propia interpretación: observaciones autobiográficas o reenvío a otros para que las interpreten (uso instrumental, posiciones sociales interpretativas –análisis publicidad).
- Imágenes tomadas por sujetos observados que son analizadas por ellos mismos con ayuda de un observador profesional – álbum familiar, antropología, análisis obra arte-).
- Imágenes tomadas por observador profesional con ayuda y colaboración de los sujetos observados en su contexto (documental o interpretación realidad por observados).
- Observación autobiográfica, reconstrucción vida con imágenes más significativas y contextos sociales.
- Imágenes elaboradas por observador.
- Fotos turísticas, album familiar.
- Cuadros (observador cualificado).
- Imágenes elaboradas por otros.
- Publicidad (códigos sociales interpretación realidad distintos grupos).
- Imágenes fotográficas descontextualizadas.
- Televisión, Internet (documentales).
- Clasificación: Dureza, diversión, seguridad, verdad, bondad, debilidad, responsabilidad.
- Maneja uds análisis, pretende gralización, tiempo, protocolo, observador entrenado, participación o no, situación natural o artificial
- Unidades de medida
- Ocurrencia (si, no)
- Frecuencia
- Tasa ocurrencia categoría x por ud tiempo
- Frecuencia relativa, cociente frecuencia categoría x por total eventos realizados
- Orden
- Duración fenómeno, suma ocurrencias, comparación mediante duración categoría entre tiempo observación
- Latencia (tpo estímulo … respuesta)
- Intensidad (grado presencia cdcta)
- Análisis fiabilidad y validez
- Fiabilidad acuerdo entre observadores
- Po = proporción acuerdo interobservación
- Pe = proporción acuerdo fortuito
- pi = Po - Pe / 1 - Pe
- Fiabilidad entre observaciones (correlación Pearson o Spearman)
- Análisis datos
- Inclusión vble tiempo
- Análisis sincrónico (ocurrencia mismo punto temporal)
- Análisis diacrónico (medidas diferentes puntos temporales)
- Medidas cdctuales
- Microanálisis (relaciones entre uds observación, análisis secuencial cambio cdcta en función precedentes, regularidades, coincidencia sincrónica cdctas). Series temporales, tablas contingencia multidimensional.
- Macroanálisis (estudio descriptivo medidas globales prevalencia o frecuencias, análisis transversal mismo tiempo o longitudinal).
- Primer paso del método científico (previo a la enunciación de hipótesis)
- Un método de investigación en sí mismo (método observacional)
- Técnica de recogida de datos
- Observador
- Sujeto que observa
- Cuerpo de conocimientos desde el que se observa
- Medio de Observación
- Instrumentos de Registro
- Situación observada
- Objeto observado
- Circunstancias que rodean la observación
- Sirve a un objetivo de investigación ya formulado
- Es planificada de forma sistemática
- Es controlada y relacionada con proposiciones más generales
- Está sujeta a comprobaciones de validez y fiabilidad
- las variables que mejor se prestan a la observación como técnica de medida son…
- Conducta y comunicación
- Dominio psicomotriz
- Actitudes e intereses
- Objetividad (fiabilidad inter-observador)
- Subjetividad (fiabilidad intra-observador)
- Reactividad (+) Habituación
- Conocimiento de la temática bajo estudio
- Imparcialidad
- Madurez mental, discreción e imaginación controlada
- Estar libre de toda fatiga
- Actitud alerta y activa
- Capacidad para escuchar y oír, ver y percibir
- Habilidad para pasar desapercibido
- Comprensión de fenómenos complejos
- Habilidades comunicativas
- Empatía
- Capacidad de autocrítica
- La Observación
- Según la sistematización o control
- Observación no sistematizada, ocasional o no controlada
- Observación sistematizada o controlada
- Conforme al grado de participación del observador
- Observación interna o participante
- Observación externa o no participante
- Auto-observación
- Continuo de comportamiento
- Atributos o Rasgos
- Conductas
- Interacciones
- Productos de conductas
- Ocurrencia (si el fenómeno se da o no)
- Frecuencia (f) (cuántas veces se da el fenómeno)
- Razón de ocurrencia: f / T
- Frecuencia relativa: f / F
- Orden (en qué secuencia aparecen los fenómenos)
- Duración (d) (tiempo que dura el fenómeno)
- Duración total: D = ∑ d
- Duración relativa: D / T
- Latencia (tiempo entre el estímulo y la respuesta)
- Intensidad (fuerza del fenómeno; requiere de una medida ordinal)
- Lista de control (Check-List)
- Enumera una serie de características o conductas, y se marca presencia o ausencia
- Registro anecdótico
- Se registran las observaciones detalladas sobre comportamientos poco frecuentes
- Sistema de rasgos
- Además de constatar presencia o ausencia de la conducta, se indica su frecuencia y duración como indicadores que permitan inferir un rasgo del sujeto
- Escalas de estimación o apreciación
- Pueden ser numéricas, gráficas o descriptivas
- el proceso de categorización requiere un estudio teórico profundo previos para decidir qué conductas/categorías son relevantes y en consecuencia deben de ser registradas
- El proceso de categorización exige…
- Definición clara y precisa de las categorías
- Exhaustividad de las categorías
- Mutua exclusividad de las categorías (disjuntividad)
- Dimensionalidad (número de valores/estados que admite la categoría)
- Categorías continuas o discretas Tamaño de la Unidad (‘molar’ vs. ‘molecular’)
- el proceso de categorización requiere un estudio teórico profundo previos para decidir qué conductas/categorías son relevantes y en consecuencia deben de ser registradas
- ¿La investigación necesita de la observación?
- ¿Unidades de observación?
- ¿Unidades de Medida?
- ¿Muestra de las conductas a observar?
- ¿Quién o quiénes serán observador?
- ¿Dónde se realizará la observación? (natural vs. artificial)
- ¿Cuántas sesiones/tiempo de observación?
- ¿Número y entrenamiento previo de los observadores?
- ¿Técnicas de registro de la observación?
- ¿Fiabilidad de la observación?
- Análisis de datos
- Categorías: 1 profesor enuncia problema, 2 alumno pregunta, 3 profesor pregunta, 4 alumno con otros compañeros, 5 alumno responde a profesor, 6 alumno trabaja
- Durante 30 minutos , cada 30 segundos, observador anota que ocurre en ese momento … 60 observaciones
- Frecuencia categorías 1 2 3 4 5 6
- c1 c2 c3 c4 nj
- c1 0 1 2 0 3
- c2 4 2 3 1 10
- c3 2 0 4 2 8
- c4 1 2 0 3 6
- ni 7 5 9 6 27
- Po = 1/27 (0+2+4+3) = 9/27 = 0,33
- Pe = 1/27^2 (3*7+5*10+8*9+6*6) = 0,24
- pi = 0,33 - 0,24 / 1 - 0,24 = 0,12
- Valoración relación grupo 5 estudiantes, ¿interés sentarse junto a …?
- Juan Pedro Luis Enrique Carlos TOT
- Juan 0 3 4 2 5 14
- Pedro 4 0 5 3 1 13
- Luis 3 2 0 4 2 11
- Enrique 4 3 2 0 2 11
- Carlos 4 4 3 5 0 16
- TOT 15 12 14 14 10 65
- Índice de integración 5 (n-1) ... (n-1) = 20 ... 4
- Índice de cohesión (14+13+11+11+16) / 5 = 65 / 5 = 13
- Valorar integración: MEDIA
- Gráfico
- 1. El investigador se adentra directamente
- 2. Durante un periodo largo en un grupo social determinado
- 3. Tomado en su ambiente natural
- 4. Estableciendo una relación de interacción personal con sus miembros
- 5. Con el fin de descubrir sus acciones y comprender sus motivaciones mediante un proceso de identificación
- Modalidades
- Crítica
- Comunicación
- Clásica
- Antropológica
- Interpretativa
- Sistemática
- Características
- Holística
- Ecológica
- Inductiva
- Naturalista
- Fenomenológica
- 1. Fenómeno nuevo o relativamente desconocido
- 2. Cuando el fenómeno muestra diferencias entre lo que manifiesta internamente y lo que necesariamente manifiesta externamente
- 3. Fenómeno privado o íntimo
- 4. Fenómeno oculto a personas ajenas al grupo
- 1. Hacer una descripción de imágenes, de las características visibles y externas del ambiente estudiado.
- 2. Importa el proceso de producción de imágenes, las interacciones formales e informales que tienen lugar durante la observación.
- Porteros: legitiman al observador ante el grupo o comunidad y le introducen en la escena común.
- Informantes: sitúan al observador y le ofrece interpretaciones de las imágenes
- Estudio de un pueblo, cualitativo, observación directa para comprender la realidad social
- Malinowski, Guba, Navarro, Giddens
- Definir el objetivo de la prueba: es decir, definir la variable que será objeto de medida (por ejemplo, “medir la competencia matemática”).
- Definir la población diana de la prueba: es decir, definir la población de referencia sobre la cual se aplicará la prueba (por ejemplo, “niños y niñas escolarizados en 5º Primaria en España”).
- Definir la utilidad esperada de la prueba: es decir, anticipar a qué uso se van a destinar los resultados derivados de la aplicación de la prueba (por ejemplo, “para detectar niños y niñas susceptibles de recibir atención educativa especial en el área de Matemáticas”).
- Fundamentar y definir el contenido de la prueba: es decir, definir el universo de contenidos que serán objeto de la prueba (por ejemplo, “sumas, restas, multiplicaciones y divisiones, con números de hasta dos cifras”); dicha definición debe estar fundamentada, es decir, debe apoyarse en algún tipo de documento que evidencie que el universo de contenidos corresponde a la variable y población definidos anteriormente (por ejemplo, un Real Decreto, Orden, o documento curricular similar, que especifique “la competencia matemática exigida para el nivel de 5º Primaria”). Los documentos citados deben ser referenciados al final del trabajo, en un apartado de “Referencias”, según el estilo APA.
- Realizar la tabla de especificación de la prueba: es decir, construir una tabla en la cual se dispongan en las columnas las áreas que componen el universo de contenidos a medir, y en las filas los procesos cognitivos que operarán sobre dichos contenidos. Por ejemplo: CUADRO EN BLANCO.
- Definir el tipo de prueba: en este caso, es obligatorio que en todos los trabajos se opte por una “prueba objetiva compuesta por ítems de elección múltiple con, al menos, 3 alternativas de respuesta (sólo 1 alternativa correcta)”. Las alternativas de respuesta deben nombrarse como A, B, C…
- Definir la longitud de la prueba: es decir, definir el número de ítems que compondrán la prueba. La prueba debe tener una longitud de, al menos, 10 ítems. Igualmente, debe haber al menos 1 ítem por cada una de las celdas definidas en la tabla de especificación. Siguiendo con nuestro ejemplo, “definimos que nuestra prueba tendrá una longitud de 10 ítems, distribuidos de la siguiente manera”:
- Ordenar/Numerar los ítems: es decir, especificar el orden en el cual se presentarán los ítems anteriormente redactados (ítem 1, ítem 2, ítem 3…).
- Redactar las instrucciones de la prueba: puede tomarse como referencia el ejemplo de instrucciones que se presenta en las páginas 144 y 145 del texto básico. Nota importante: una vez redactados y ordenados los ítems de la prueba, y redactadas las instrucciones, se puede presentar el conjunto definitivo de la prueba como “Anexo” al final del trabajo. Se recomienda que dicho anexo incluya igualmente la plantilla con las respuestas correctas a los ítems de la prueba.
- Definir el tiempo de aplicación: es decir, definir, de manera justificada, cuál es el tiempo de aplicación de la prueba (por ejemplo, “se estima que cada uno de los 10 ítems de la prueba puede ser contestado en un máximo de 3 minutos; por tanto, el tiempo total de aplicación será de 30 minutos”).
- Definir el soporte de aplicación: es decir, definir si la prueba será aplicada en formato papel, en formato digital, por teléfono… en caso de realizar el trabajo con una muestra real, recomendamos vivamente aplicar la prueba en formato digital, utilizando para su virtualización la herramienta “Google Forms” o similar; puesto que con ella las respuestas de los sujetos quedarán grabadas automáticamente en una matriz de datos que servirá de base para los posteriores análisis.
- Definir el tipo de aplicación: es decir, si la aplicación se hará de manera individual o colectiva; con o sin la presencia del investigador. o Definir la muestra de aplicación: es decir, definir el tamaño de la muestra sobre la cual se va aplicar la prueba. Se exige que se aplique al menos a 20 sujetos.
- Obtener la matriz de respuestas directas: una vez aplicada la prueba se obtendrá, y así debe aportarse en el trabajo, una primera matriz de datos con las respuestas directas de los sujetos. Es decir, una matriz con tantas filas como sujetos, tantas columnas como ítems tenga la prueba, y en cada una de las celdas aparecerá la respuesta directa (“A”, “B”, “C”…) dada por el sujeto al ítem. Se recomienda añadir una columna inicial a la izquierda que incluya un identificador del sujeto (“Sujeto1”, “Sujeto2”, “Sujeto3”…o “ID1”, “ID2”, “ID3”…).
- Obtener la matriz de aciertos/errores: es decir, a partir de la matriz anterior, debe obtenerse, y aportarse en el trabajo, una segunda matriz en donde cada una de las respuestas directas sea sustituida por “0” (en caso de respuesta incorrecta) o “1” (en caso de respuesta correcta”).
- Cálculo de la puntuación total de cada sujeto en la prueba: finalmente, a la matriz de aciertos/errores, se le añadirá una columna adicional que contendrá la puntuación total de cada sujeto en la prueba. Para simplificar los posteriores análisis, se permite calcular la puntuación total como simple suma de aciertos del sujeto a lo largo de la prueba (es decir, sin hacer la corrección por azar = los fallos no restan).
- Calcular el Índice de Dificultad (ID’), para todos y cada uno de los ítems que componen la prueba. En este caso, sí que se exige que se calcule aplicando la corrección debida a los efectos del azar. Se pide igualmente representar de manera gráfica cómo evoluciona el ID’ a lo largo de los ítems de la prueba. o Escoger 1 de los ítems de la prueba (se recomienda escoger un ítem de dificultad media), y sobre el mismo calcular:
- Índice de Discriminación (D). Para simplificar, por ejemplo en el caso de tener 20 sujetos, se puede coger como ‘extremo superior’ el 25% de sujetos (=5 sujetos) con mayor puntuación en la prueba, y como ‘extremo inferior’ el 25% de sujetos (=5 sujetos) con menor puntuación en la prueba.
- Índice de Homogeneidad (IH). Se recomienda utilizar el procedimiento de correlación ítem – total (excluido el ítem).
- Análisis de los Distractores. Es decir, comprobar la equiprobabilidad de los distractores mediante la prueba Ji-Cuadrado.
- Calcular la fiabilidad de la prueba en su conjunto, como consistencia interna. Se admite tanto el procedimiento de las dos mitades como el alfa de Cronbach.
- Definir un criterio externo relevante para estudiar la validez criterial de la prueba. (Por ejemplo, “nota media en Matemáticas obtenida en la última evaluación de 5º Primaria”). Tras definir de manera justificada el criterio elegido, deberá añadirse a la matriz de acierto/error una nueva columna con la puntuación directa de cada sujeto en dicho criterio (que será necesariamente una puntuación simulada).
- Calcular la validez criterial de la prueba, con respecto al criterio previamente definido. o Baremar la prueba: se pide calcular el valor de los deciles (percentil 10, 20,…, 80, 90) y cuartiles (percentil 25, 50, 75), correspondientes a la puntuación total en la prueba.
- OPCIONAL: De manera opcional, se pide transformar las puntuaciones totales de los sujetos en la prueba a puntuaciones típicas (z).
- Valorar los Índices de Dificultad (ID’) obtenidos:
- ¿Cuáles son los dos ítems más fáciles de la prueba?
- ¿Cuáles son los dos ítems más difíciles?
- ¿Cuál es el ID’ promedio de la prueba?
- ¿La prueba en su conjunto es de dificultad baja, media, alta?
- ¿Sigue la prueba la recomendación de presentar los ítems en dificultad creciente (los más fáciles al principio y los más difíciles al final)?
- Para el ítem escogido, valorar el Índice de Discriminación (D), el Índice de Homogeneidad, y la equiprobabilidad de sus distractores.
- En conjunto, ¿cómo valorarías la calidad de este ítem?
- ¿lo incluirías en una próxima versión perfeccionada de tu prueba? ¿Por qué?
- Valorar la fiabilidad de la prueba:
- ¿Cómo dirías que es la fiabilidad de tu prueba? ¿Excelente, Buena, Aceptable, Cuestionable…?
- Dada la fiabilidad encontrada, ¿crees que puedes extraer conclusiones de tus resultados?
- En caso de que tu prueba tenga una fiabilidad por debajo de 0,80, ¿cómo podrías incrementarla?
- Valorar la validez criterial de la prueba:
- ¿Cómo dirías que es la validez criterial de la prueba?
- ¿Cómo interpretas el valor de validez criterial que has obtenido?
- Aplicación práctica de la baremación realizada:
- ¿Qué sujetos se encuentran por debajo del percentil 20?
- ¿les aplicarías alguna medida educativa especial?
- ¿qué sujetos se encuentra por encima del percentil 80?
- ¿les aplicarías alguna medida educativa especial?
- Valoración global de la prueba construida.
- ¿Cuáles crees que son los puntos fuertes de tu prueba?
- ¿Cuáles son sus puntos débiles?
- ¿Cómo crees que se podría mejorar para el futuro?
- ¿Qué has aprendido?
- ¿Qué competencias has adquirido?
- ¿Cómo relacionas dichas competencias con tu futuro perfil profesional de pedagogo/a?
- ¿Tienes algún comentario o sugerencia al respecto de esta “Práctica A”?
- Adecuado diseño y construcción de la prueba: 20% de la calificación.
- Adecuada aplicación y puntuación de la prueba: 20% de la calificación.
- Adecuado análisis de las propiedades métricas: 30% de la calificación.
- Adecuada valoración de las propiedades métricas: 20% de la calificación.
- Adecuada reflexión final: 10% de la calificación.



Comentarios
Publicar un comentario