TUTORÍA TRI 18 DICIEMBRE 2025
GRABACIÓN TUTORIA 11 DICIEMBRE ESCALAS
GRABACIÓN TUTORÍA 18 DICIEMBRE
TEMA 8 PRUEBAS CRITERIALES EQUIPO DOCENTE
TEMA 9 TÉCNICAS GRUPALES EQUIPO DOCENTE
TEMA 10 ANÁLISIS DOCUMENTAL EQUIPO DOCENTE
Vamos a ver en las dos tutorías que nos quedan los tres últimos temas en el día de hoy y para la próxima tutoría haremos un examen del curso pasado. Empezamos hoy por el tema 8 que lleva por título: Pruebas criteriales. Estas pruebas representen un tipo especial de pruebas con importantes implicaciones educativas, como son los test de referencia criterial TRC, que tienen su origen a principios de los años 60, en que Robert Glaser los definió como pruebas que evalúan el nivel de ejecución del sujeto, no con respecto a la media del grupo de referencia de edad, sino con respecto a una serie de conductas predefinidas. Es decir, no intentamos en ningún caso determinar la posición del sujeto con respecto al grupo de referencia, no nos interesa el percentil que ocupa, sino si domina o no el contenido que evalúa la prueba en concreto.
Estos TRC entre otras cuestiones:
- Obligan a definir con mayor precisión y objetividad, y de forma operativa, los objetivos y criterios de interés, en línea con la evaluación conductual.
- Obligan a muestrear exhaustivamente los objetivos a evaluar, lo que conlleva contemplar varios tipos de ítems con formatos diferentes, para lograr la pretendida validez de contenido.
- Potencian formas alternativas de valorar la fiabilidad y la validez, no se halla la fiabilidad con la correlación test - retest o formas paralelas, ni la validez mediente la correlación de la puntuación con un criterio, sino mediante índices específicos, como el coeficiente de Hambleton y Novick, parecido al coeficiente de Kappa entre los evaluadores del test, pero simplemente estableciendo la diferencia entre la puntación observada y la esperada, también podemos recurrir al coeficiente de Kappa = po - pe / 1 - pe, o como el coeficiente de Livington que puede utilizarse con uno o dos observadores.
- Obligan a desarrollar técnicas para estimar los puntos de corte, para determinar cuántas personas han superado el dominio del contenido, lo cual se hace en función del contenido y no de las personas evaluadas.
- Sirven para determinar los puntos fuertes y débiles de los sujetos evaluados en función de las respuestas a las preguntas, en qué fallan y qué dominio han conseguido.
Podemos encontrarnos con los siguientes tipos de pruebas criteriales:
- Tests de certificación o admisión (consecución)
- Tests de nivel o dominio (promoción)
- Tests de diagnóstico (detección)
- Test de aula
- Test individualizado
Para elaborar una prueba criterial observamos los siguientes pasos:
- Especificación del dominio educativo
- Guarda relación con la validez de contenido y de constructo
- Elementos que representan el propósito de instrucción (objetivos, acciones, tareas)
- Hay que recoger todos los objetivos, contenidos y actividades que formen parte de la Unidad Didáctica
- Análisis de ítems
- Revisión lógica: correspondencia entre los ítems y la operativización del dominio de contenidos, mediante juicio de expertos
- Representatividad congruencia ítems - objetivos
- Calidad técnica
- Ausencia sesgo o neutralidad respecto sujetos o grupos
- Revisión empírica, estudio del funcionamiento de la aplicación de la prueba
- Formulación de hipótesis en relación con la dificultad y poder discriminativo de los ítems
- Aplicación piloto a una muestra de sujetos
- Análisis de los resultados (por ítem)
- Nivel de dificultad
- Proporción de personas que correctan adecuadamente a cada ítem
- Discriminación entre el grupo experimental y el grupo control
- Índices de sensibilidad a la instrucción
- DIS gn ganancia neta
- Proporción sujetos respuesta incorrecta en pretest y correcta en postest
- MENOS
- Proporción sujetos respuesta incorrecta pretest y postest
- Pretest Postest
- Item 1 Item 2 Item 1 Item 2
- Sj1 0 1 0 1
- Sj2 0 0 1 1
- Sj3 1 0 1 1
- Sj4 0 0 1 1
- Sj5 1 0 1 1
- Sj6 0
000 - Sj7 0 1 1 1
- Sj8 1
010 - Sj9 0 0 0 1
- Sj10 1 0 1 1
- 6/10 - 2/10 = 4/10 = 0,4
- DIS si ci diferencia entre el grupo control y experimental sin instrucción y con instrucción
- Proporción sujetos aciertan test grupo con instrucción
- MENOS
- Proporción sujetos aciertan test grupo sin instrucción
- Índice de homogeneidad, los ítems que evalúan un mismo objetivo tienen que comportarse de manera similar, en sucesivas administraciones del test
- Correlación ítem - total
- Validez
- Interpretación y toma de decisiones
- Determinación de estándares y puntos de corte, es necesario determinar la puntuación que sirva para diferenciar a los alumnos que han alcanzado o no el nivel de competencia mínimo para superar la prueba, dicha puntuación se denomina punto de corte o estándar, y se utiliza el criterio de jueces.
- Estudio de las características técnicas de la prueba
- Fiabilidad o estabilidad de las clasificaciones
- Validez
- Contenido
- Criterio
- Constructo
- Velocidad lectora: nº palabras / minuto
- Nivel lector
- Prelector
- Silábico
- Léxico
- Temático
- Deficiencia y errores
- Alteraciones
- Omisiones
- Adiciones
- Sustituciones
- Unión o separación indebida
- Paradas y bloqueos
- Modulación
- Básica
- Puntos, comas, acentos, interrogaciones, admiraciones
- Superior
- Expresividad, tono y ritmo
- Grupo focal
- Un moderador introduce un tema de discusión en un grupo en el que los miembros interactúan comentando y dando su opinión en torno a los objetivos (focos) que plantea el moderador
- En un grupo focal los participantes suelen ser de un perfil homogéneo, siendo la selección dirigida, debe existir un moderador que debe articular el debate para que la discusión se centre y no salga del foco, tiene que existir un anotador y un técnico que grabe el evento
- Tiene
- Ventajas
- Facilidad elección muestra
- Dinámica de grupos es más que la suma de individuos
- Se obtiene información exhaustiva
- Inconvenientes
- Posibles sesgos del moderador
- Monopolización de la conversación por unos pocos
- Coste del análisis de datos
- En educación se utilizan para
- Obtener información sobre percepciones, ideas, actitudes, experiencias o creencias de las partes interesadas en cualquier proceso educativo, obteniendo una información exhaustiva del tema estudiado
- Incrementar la información de forma cualitativa de una técnica cuantitativa previamente aplicada (encuesta)
- Grupo nominal
- Grupo pequeño y natural para fomentar la participación de todos los miembros del grupo evitando la monopolización de algunos
- Se plantea verbalmente o por escrito una pregunta al grupo, se dan 10 minutos para que los participantes escriban sus ideas, se les dan otros 10-15 minutos a los participantes para que expongan sus ideas, y posteriormente se procede a una puesta en común y se votan las ideas
- Se utiliza para
- Generar ideas creativas
- Lograr consensos
- Garantizar la libre expresión de todos los miembros del grupo
- Resolver conflictos y divergencias en el grupo
- Entrevista en profundidad
- Interacción dinámica entre dos personas, entrevista abierta, lo importante es lo que el entrevistado aporte, la respuesta del entrevistado elicita la siguiente pregunta del entrevistador
- El entrevistador debe tener su guión y sus objetivos aunque no estén escritos, debe comentar e informar al entrevistado la finalidad de la entrevista, y garantizar la confidencialidad de los datos aportados, el desarrollo de la entrevista debe ir de lo genérico a lo específico, de lo superficial a lo comprometido
- Normalmente la entrevista en profundidad como técnica se utiliza para
- Conseguir información compleja
- Conseguir información delicada o tabú (confidencial)
- Conseguir información experta de profesionales
- Paso previo a la elaboración de cuestionarios, tras identificar los aspectos relevantes de una determinada realidad
- Brainstorming (o en castellano traducido por tormenta de ideas)
- Técnica de estímulo de la creatividad, en la que un grupo de 8 a 12 personas, preferentemente heterogéneas, aporta ideas para solucionar un determinado conflicto o sobre la causa de un problema determinado
- Un moderador facilita la expresión de ideas que va anotando a la vista de todos en un panel, alentando la participación de todos hasta que se agoten las ideas sin analizar o juzgar
- A continuación se seleccionan cinco criterios en los que clasificar las ideas
- Se escogen las 5 ideas de mayor consenso
- Se valoran las ideas de 0 a 5 puntos
- Se selecciona la idea con valoración más alta
- Técnica Delphi
- Se distribuyen cuestionarios o documentos en varias rondas a expertos (panel de expertos), especialmente sobre proyecciones a futuro de una determinada realidad, en cada ronda se proporciona a los panelistas las distintas respuestas dadas por los expertos, y un análisis estadístico de la ronda en cuestión, y pueden revisar las suyas, finalizando el procedimiento cuando se ha alcanzado cierto consenso sobre el tema en cuestión
- Las características de esta técnica son las siguientes
- Anonimato entre los participantes
- Iteración de tantas rondas como sean necesarias
- Retroalimentación controlada, la información que se traslada a los participantes no es toda, sino la necesaria en función de los objetivos del tema
- Resultados estadísticos
- Promedio
- Grado de dispersión
- Tienen
- Ventajas
- Anonimato entre participantes e iteración
- Se evita la presión de los miembros dominantes al captar la información de todos del mismo modo
- Inconvenientes
- Intercambio de información limitado, los participantes no llegan a interactuar entre sí
- Se reduce la motivación de los expertos, al no existir recompensa social por su contribución
- Técnicas sociométricas
- Centran su atención en las relaciones existentes entre miembros de un grupo
- Los principales instrumentos sociométricos son
- El sociograma
- Pone de manifiesto los lazos de influencia y preferencia que existen en un grupo
- Permite
- Detectar problemas de inadaptación social
- Aislados
- Rechazados
- Subgrupos
- Determinar estrategias metodológicas en el aula a la hora de conformar grupos de trabajo en función de la cohesión de sus miembros, integración de sujetos aislados o rechazados a través de miembros puente, reconciliar subgrupos a través de los líderes
- Representación gráfica de elecciones y rechazos
- Electores en filas
- Elegibles en columnas
- Interpretación
- Posición sociométrica
- Líder: muchas aceptaciones y pocos o ningún rechazo
- Eminencia gris, miembro casi aislado, sólo relación diádica con líder
- Aislado, no recibe elecciones ni tampoco elige a nadie
- Marginado, elige a otros, pero no es elegido por nadie
- Rechazado parcial, recibe menos elecciones que rechazos
- Rechazado total, solamente recibe rechazos
- Norma, recibe algunas elecciones y algunos rechazos
- Polémico, recibe muchas elecciones y muchos rechazos
- Configuraciones sociométricas
- Pareja o relación diádica, elección mutua entre dos personas
- Triángulo o relación triádica, A elige a B, B a C y C a A
- Cadena, A elige a B, B a C, C a D
- Estrella, un sujeto concentra muchas elecciones líder
- La escala de distancia social
- Nos permite conocer la opinión y actitud afectiva de cada estudiante respecto de sus compañeros, se redactan proposiciones que van desde mayor cercanía a mayor lejanía y cada estudiante enjuicia la situación en que se encuentra cada compañero con respecto a él
- Filas enjuiciados
- Columnas enjuiciadores
- Índices
- Integración: red de interrelaciones que generan sensación dependencia de grupo, relación particular del sujeto respecto al grupo
- Suma puntuaciones emitidas sobre un sujeto por los miembros de un grupo
- Cohesión: miembros satisfactoriamente ligados al grupo, afecta al grupo en su conjunto
- Media de índices de integración de los sujetos del grupo
- IC = E II / nº miembros grupo
- Posible comparar con otros grupos o ver la evolución del mismo grupo a lo largo del tiempo
- Los inventarios de personalidad
- Ponen al sujeto en una relación ficticia en relación a una conducta social para comprobar qué haría en dicha situación
- Se valora la proyección de la actitud en relación a conductas específicas
- Alumno 1: Prefiero estudiar con 2, No quiero estudiar con 4
- Alumno 2: Prefiero estudiar con 5, No quiero estudiar con 1
- Alumno 3: Prefiero estudiar con 5, No quiero estudiar con 6
- Alumno 4: Prefiero estudiar con 5, No quiero estudiar con 2
- Alumno 5: Prefiero estudiar con 4, No quiero estudiar con 3
- Alumno 6: Prefiero estudiar con 5, No quiero estudiar con 3
- E más integrado, recibe 4 elecciones, C y D 2 elecciones, B 1, y A ninguna
- E mayor aceptación
- C y D posición intermedia
- B tiende al rechazo
- A mayor rechazo
- IC = (4+2+2+1+0) / 5 = 9 / 5 = 1,8
- Elevado, porque máximo sería 2
- Escala 4 categorías
- 4 (n-1) ... (n-1) siendo n el número de casos
- 4 . 3 ... 3
- 12 ... 3
- A = 8
- B = 7
- C = 8
- D = 9
- D más integrado
- B menos integrado
- 9 D
- 8,5
- 8 A C
- 7,5
- 7 B
- 1,0 1,5 2,0 2,5 3,0 3,5 4,0
- IC = (8+7+8+9) / 4 = 32 / 4 = 8
- Índice de cohesión en punto central (12, 3)
- II = 3 (n-1) ... (n-1)
- 3 .3 ... 3
- 9 ... 3
- María = 6
- Susana = 9
- Francisco = 7
- Sara = 8
- IC = (6+9+7+8) / 4 = 30 / 4 = 7,5
- II 5 (n-1) ... n-1
- 5.4 ... 4
- 20 ... 4
- Juan = 14
- Pedro = 13
- Luis = 11
- Enrique = 11
- Carlos = 16
- IC = (14+13+11+11+16) / 5 = 65 / 5 = 13 en el centro de la escala
- Media
- Métodos clásicos
- Interno (calidad y veracidad del contenido textual)
- Externo (autenticidad y resonancia del contexto en que se desarrolla el texto)
- Métodos cuantitativos, complementan a los métodos clásicos, para eliminar el subjetivismo del investigador
- Semántica cuantitativa
- Análisis de contenido
- Técnica objetiva, sistemática y cuantitativa
- Objetividad --> replicable
- Sistemático --> se aplican reglas
- Cuantificable --> transformación texto en datos cuantitativos
- Todo o una muestra
- Unidad de análisis: palabras, frases, párrafos, temas
- Categorización: selección y estructuración categorías análisis
- FIABILIDAD: correlación entre categorizaciones de varios codificadores
- Manifiesto --> se analiza la comunicación
- Se trata de transformar el texto del documento en datos cuantitativos
- Análisis estadísticos: frecuencias, tablas de contingencia, medidas de asociación
- Existen varios tipos de documentos
- Actas, Circulares
- Informes
- Cartas, diarios de sesiones
- Revistas, periódicos, libros
- E-mail, tweets
- Documentos audiovisuales
- El procedimiento para llevar a cabo el análisis de documentos es el siguiente:
- Objetivo y contexto
- Objetivo de la investigación
- Elección del tipo de documento
- Unidades de contenido dentro del documento
- Unidades de análisis
- Muestra
- Contexto
- Unidades de registro
- Reglas de numeración y recuento
- Presencia o ausencia
- Frecuencia de aparición
- Orden de aparición
- Unidades de texto previas o posteriores
- Categorización
- Clasificación de elementos del texto
- Categorías exhaustivas, mutuamente excluyentes, homogéneas, significativas y replicables
- Codificación
- Traducir categorización a valores numéricos
- Fiabilidad y validez
- FIABILIDAD: Grado de acuerdo entre codificadores
- VALIDEZ: Exhaustividad y Productividad del sistema de categorías
- Análisis de datos
- Descriptivos
- Inferenciales
- Multivariantes
- Tipología
- Análisis de contenido temático: presencia de términos o conceptos
- Recuento de palabras
- Identificación y clasificación temática
- Búsqueda de palabras en contexto
- Análisis de contenido semántico
- Relaciones entre temas que aparecen en un texto: patrones de relaciones
- Matriz semántica (problema - solución): esquemas
- Análisis de redes
- Ubicación relativa de componentes
- Representación bidimensional o tridimensional múltiples matrices semánticas interrelacionadas
- Tiene
- Ventajas
- Técnica no intrusiva
- Bajo coste
- Inconvenientes
- Limitación de documentos existentes a la historia de la propia institución
- Documentos con propósitos diferentes al tema de investigación, tienen finalidad orgánica, para la supervivencia de la institución
- Documentación bibliográfica
Comentarios
Publicar un comentario