TUTORÍAS 27 OCTUBRE 2022
1.- TÉCNICAS DE INVESTIGACIÓN SOCIAL SOCIOLOGÍA
2.- MÉTODOS DE INVESTIGACIÓN SOCIAL POLÍTICAS
- TEMA 3: MEDICIÓN FIABILIDAD Y VALIDEZ
3.- TÉCNICAS DE RECOGIDA DE INFORMACIÓN PEDAGOGÍA
- EN PLATAFORMA TRANSPARENCIAS TEMA 1 EQUIPO DOCENTE
- CUESTIONARIO TEMA 1 SE PUEDE HACER A TRAVÉS DE LA PLATAFORMA
- SEGUIMOS TEMA 2 CARACTERÍSTICAS TÉCNICAS INSTRUMENTOS MEDIDA
- PRÁCTICA A (VER FINAL DE ESTA WEB)
4.- PSICOLOGÍA DEL DESARROLLO
- TEMA 3 TRANSPARENCIAS CA ILLES BALEARS
- ESQUEMA TEMA 3
- TESTS TEMA 3
- EXPLICACIÓN PREVIA
- El objetivo de este tema es acercar al alumno al conocimiento de las peculiaridades metodológicas de la investigación del desarrollo evolutivo.
- Con ello se trata de precisar, en torno a este campo específico, lo que probablemente ya se ha estudiado en otras áreas más generales (metodología, psicología experimental, …).
- Esas peculiaridades tienen que ver, sobre todo, con algunos problemas característicos relacionados con la particular naturaleza de su objeto de estudio: los procesos de cambio a través del tiempo.
- A lo largo de la exposición se verá, no obstante, que las especiales dificultades que plantea el estudio de los procesos evolutivos, pueden abordarse y superarse desde distintas aproximaciones metodológicas.
- En este sentido, el núcleo del contenido de este capítulo lo constituyen los métodos y técnicas y diseños metodológicos específicamente pensados para la investigación del desarrollo.
- Por consiguiente, a su comprensión en profundidad deberá dirigir el alumno todos sus esfuerzos.
- En la preparación del tema, deberá centrarse en comprender las posibilidades y limitaciones que ofrecen los distintos acercamientos y técnicas metodológicas dentro del método científico general; atendiendo a sus características y contextos de aplicación más indicados en nuestro campo de estudio.
- Ahora bien, una vez identificadas las propiedades de cada aproximación o técnica, con sus ventajas y sus limitaciones, también es importante ser consciente de que se trata de metodologías complementarias.
- Por ello, el análisis y la valoración de cada acercamiento particular habrá de realizarse, necesariamente, atendiendo a las peculiaridades de la investigación en la que se va a aplicar, por lo que serán las condiciones en que ésta pueda plantearse y sus objetivos concretos –descriptivos y/o explicativos– los que llevarán a optar por unas u otras.
- A este respecto, es preciso tener en cuenta las necesidades de cualquier investigación y los problemas particulares que, como decíamos, están asociados al estudio del desarrollo.
- Por ello, si bien se introducen oportunamente los principales conceptos, el alumno deberá activar sus conocimientos previos respecto a los principios fundamentales de la investigación científica y las diversas posibilidades metodológicas que brinda el método científico –descriptiva, correlacional, cuasiexperimental y experimental-.
- Será lo que le permita además situar las técnicas concretas aplicadas en nuestro particular campo de conocimiento en el panorama general de la metodología de la investigación evolutiva.
- En relación con estos núcleos de contenido, existen una serie conceptos fundamentales, relacionados entre sí y sobre los que conviene llamar la atención, ya que su comprensión facilitará el estudio y asimilación de los contenidos subsiguientes:
- El contraste entre variables independientes y variables dependientes. Entender este contraste supone entender la naturaleza básica de lo que supone realizar un experimento que, como se sabe, constituye la herramienta esencial del método científico.
- La validez de los resultados de una investigación. Para que cumplan su objetivo, los experimentos deben diseñarse con cuidado y cumplir una serie de requisitos que garanticen el control de la situación.
- Pues bien, al estudiar el concepto de validez el alumno debe ir analizando y comprendiendo los múltiples factores que, al disminuir ese control, ponen en riesgo la calidad de los datos que pueden obtenerse a través de la investigación.
- Variables no manipulables. Como decimos, la validez depende del control experimental y el primer control, sin duda, es el que se refiere a la posibilidad que tiene el experimentador de manipular los valores de las variables en estudio.
- Las restricciones de algunas variables a este respecto explican por qué no siempre es posible un acercamiento rigurosamente experimental a la investigación.
- El alumno debe tener muy claro este aspecto para comprender las dificultades de los estudios evolutivos debido a las variables por las que se interesa, en particular la variable edad.
- Medidas repetidas y medidas independientes. Estas etiquetas aluden a estrategias generales del diseño de una investigación en cuanto a los grupos de sujetos a utilizar para tomar las medidas. Comprender esta diferencia es la base para entender posteriormente las peculiaridades y las dificultades propias de los diseños en psicología evolutiva.
- Sugerimos que, una vez estudiados estos conceptos, el alumno reflexione sobre los mismos y trate de dar sus propias definiciones. Con ello podrá comprobar si tiene suficiente seguridad sobre su significado y sentido.
- Creemos que, con esta base, se tendrán pocos problemas al estudiar después los distintos diseños característicos de la psicología evolutiva, que son básicamente dos: los diseños longitudinales y los diseños transversales; aunque, tratando de superar sus dificultades inherentes, se han desarrollado también otras estrategias en los llamados diseños secuenciales.
- El análisis de estos diseños básicos constituye otro de los principales contenidos del capítulo y deben comprenderse en profundidad. En este sentido, hay algunos puntos que merecen un pequeño comentario.
- En primer lugar, unas palabras aclaratorias sobre el valor de los dos diseños básicos, longitudinal y transversal.
- Como se verá, en el tema se llama la atención sobre la ventaja que, desde el punto de vista teórico, tiene el primero sobre el segundo: sencillamente, sólo mediante una estrategia longitudinal pueden alcanzarse de forma directa los objetivos propiamente evolutivos, esto es, los relacionados con el estudio del cambio intraindividual.
- Pese a ello, sin embargo, hay que destacar también el valor práctico de la metodología transversal -de hecho, la más utilizada-, por la facilidad con que permite obtener gran cantidad de datos, sin duda, útiles.
- Así pues, debe quedar claro que ambas estrategias son valorables, aunque por diferentes razones; y serán, por tanto, las condiciones en que pueda plantearse el estudio y sus objetivos concretos, los que llevarán a optar por una u otra posibilidad.
- Por otro lado, como se verá en el texto, la imposibilidad de generalizar los datos a distintas generaciones se atribuye particularmente a los diseños longitudinales, dado que, en principio, sólo estudian un grupo generacional.
- Esto no quiere decir, sin embargo, que el problema esté ausente en la estrategia transversal; tal y como se verá, se insiste en el hecho de que cada una de las generaciones estudiadas está ligada también a una sola edad, por lo que, en rigor, las generalizaciones directas tampoco son posibles.
- Precisamente por este tipo de limitaciones se destaca finalmente el valor de los diseños secuenciales, como una estrategia mixta que permite, a través de distintas comparaciones, manejar metodológicamente los efectos generacionales.
GRADO EN PEDAGOGÍA TÉCNICAS E INSTRUMENTOS PARA LA RECOGIDA DE INFORMACIÓN CURSO 2022/2023
ENUNCIADO DE LA “PRÁCTICA A” (“Diseño, aplicación y valoración de una prueba objetiva”)
Información General:
La “Práctica A” es supervisada por el Tutor/a del Centro Asociado, que es la persona igualmente responsable de su calificación (en una escala de 0 a 10 puntos) a través de la plataforma. Las dudas acerca de la realización de la “Práctica A” deben ser dirigidas, por tanto, al Tutor/a del Centro Asociado, presencialmente durante las tutorías, o telemáticamente a través del correo electrónico y/o foro de tutoría.
La “Práctica A” puede realizarse bien individualmente, bien en grupo (de hasta 3 estudiantes, y que pertenezcan al mismo Centro Asociado o, en su defecto, al mismo Grupo de Tutoría en el curso virtual).
En caso de realización en grupo, éste debe ser comunicado al Tutor/a del Centro Asociado durante el mes de noviembre.
La “Práctica A” puede ser entregada en convocatoria ordinaria (fecha de entrega: 15 de enero de 2023) o en convocatoria extraordinaria (fecha de entrega: 05 de septiembre de 2023). El enunciado que se expondrá a continuación es válido para ambas convocatorias.
En cualquier caso, se recomienda vivamente entregar la “Práctica A” en la convocatoria ordinaria dado que es el periodo en el cual se contará con la supervisión y ayuda del Tutor/a del Centro Asociado (no habrá tutorización para la convocatoria extraordinaria, y las prácticas entregadas en convocatoria extraordinaria serán corregidas por el Equipo Docente de la Sede Central).
Con respecto a la entrega de la “Práctica A”, se realizará exclusivamente a través del curso virtual de la asignatura, en el buzón correspondiente que estará accesible a través del enlace “Entrega de Trabajos” del menú izquierdo del curso.
En caso de realizar la práctica en grupo, todos los miembros deben entregar una copia digital de la misma. Enunciado de la “Práctica A”: Según se indica en la Guía de Estudio de la asignatura, el objetivo general de las prácticas obligatorias es “que el estudiante aprenda a diseñar, aplicar y evaluar, de manera integrada y significativa, algunas de las técnicas e instrumentos que se estudian a lo largo de la asignatura”.
Más concretamente, en esta “Práctica A” del curso 2022/2023, se solicita al estudiante: que diseñe/construya una ‘prueba objetiva’, compuesta por al menos 10 ítems de elección múltiple; que la aplique sobre una muestra (real o simulada), compuesta por al menos 20 sujetos; que analice alguna de las propiedades métricas de la ‘prueba objetiva’ construida, y de los ítems que la componen, desde la Teoría Clásica de los Test (TCT); que evalúe/valore la calidad de dicha prueba; y que reflexione finalmente sobre todo el proceso seguido.
Se recomienda al estudiante repasar los Temas 2 y 4 del texto básico para poder afrontar la práctica con garantías. Igualmente, el estudiante se puede apoyar en los programas Excel y/o R para su realización. Por tanto, el desarrollo de la práctica exige abordar las siguientes 5 fases, en cada una de las cuales se exigen una serie de cuestiones; este desarrollo se expone detalladamente a continuación, y con el apoyo de un ejemplo, y puede servir al estudiante como guion-índice para realizar la práctica:
1ª Fase: Diseño y construcción de la prueba.
- Definir el objetivo de la prueba: es decir, definir la variable que será objeto de medida (por ejemplo, “medir la competencia matemática”).
- Definir la población diana de la prueba: es decir, definir la población de referencia sobre la cual se aplicará la prueba (por ejemplo, “niños y niñas escolarizados en 5º Primaria en España”).
- Definir la utilidad esperada de la prueba: es decir, anticipar a qué uso se van a destinar los resultados derivados de la aplicación de la prueba (por ejemplo, “para detectar niños y niñas susceptibles de recibir atención educativa especial en el área de Matemáticas”).
- Fundamentar y definir el contenido de la prueba: es decir, definir el universo de contenidos que serán objeto de la prueba (por ejemplo, “sumas, restas, multiplicaciones y divisiones, con números de hasta dos cifras”); dicha definición debe estar fundamentada, es decir, debe apoyarse en algún tipo de documento que evidencie que el universo de contenidos corresponde a la variable y población definidos anteriormente (por ejemplo, un Real Decreto, Orden, o documento curricular similar, que especifique “la competencia matemática exigida para el nivel de 5º Primaria”).
- Los documentos citados deben ser referenciados al final del trabajo, en un apartado de “Referencias”, según el estilo APA.
- Realizar la tabla de especificación de la prueba: es decir, construir una tabla en la cual se dispongan en las columnas las áreas que componen el universo de contenidos a medir, y en las filas los procesos cognitivos que operarán sobre dichos contenidos.
- Por ejemplo:
- Contenidos Suma Resta Multiplicación División
- Procesos Conocer/Calcular Comprender/Aplicar
- Definir el tipo de prueba: en este caso, es obligatorio que en todos los trabajos se opte por una “prueba objetiva compuesta por ítems de elección múltiple con, al menos, 3 alternativas de respuesta (sólo 1 alternativa correcta)”.
- Las alternativas de respuesta deben nombrarse como A, B, C…
- Definir la longitud de la prueba: es decir, definir el número de ítems que compondrán la prueba. La prueba debe tener una longitud de, al menos, 10 ítems. Igualmente, debe haber al menos 1 ítem por cada una de las celdas definidas en la tabla de especificación. Siguiendo con nuestro ejemplo, “definimos que nuestra prueba tendrá una longitud de 10 ítems, distribuidos de la siguiente manera”:
- Contenidos Suma Resta Multiplicación División TOTAL
- Procesos
- Conocer/Calcular 1 1 1 1 4
- Comprender/Aplicar 2 2 1 1 6
- TOTAL 3 3 2 2 10
- Redactar los ítems: para lo cual recomendamos seguir las indicaciones de la página 143 del texto básico. Cada ítem redactado, debe acompañarse con sus correspondientes especificaciones.
- Por ejemplo: Para tu cumpleaños, quieres regalar a cada uno de tus 25 compañeros de clase, una bolsita con 12 caramelos ¿Cuántos caramelos te hacen falta para conseguirlo?: A. 280 B. 300 C. 320
- Contenido Proceso Opción correcta Especificaciones Multiplicación
- Comprender/Aplicar B
- Ordenar/Numerar los ítems: es decir, especificar el orden en el cual se presentarán los ítems anteriormente redactados (ítem 1, ítem 2, ítem 3…).
- Redactar las instrucciones de la prueba: puede tomarse como referencia el ejemplo de instrucciones que se presenta en las páginas 144 y 145 del texto básico.
- Nota importante: una vez redactados y ordenados los ítems de la prueba, y redactadas las instrucciones, se puede presentar el conjunto definitivo de la prueba como “Anexo” al final del trabajo.
- Se recomienda que dicho anexo incluya igualmente la plantilla con las respuestas correctas a los ítems de la prueba.
- Definir el tiempo de aplicación: es decir, definir, de manera justificada, cuál es el tiempo de aplicación de la prueba (por ejemplo, “se estima que cada uno de los 10 ítems de la prueba puede ser contestado en un máximo de 3 minutos; por tanto, el tiempo total de aplicación será de 30 minutos”).
- Definir el soporte de aplicación: es decir, definir si la prueba será aplicada en formato papel, en formato digital, por teléfono… en caso de realizar el trabajo con una muestra real, recomendamos vivamente aplicar la prueba en formato digital, utilizando para su virtualización la herramienta “Google Forms” o similar; puesto que con ella las respuestas de los sujetos quedarán grabadas automáticamente en una matriz de datos que servirá de base para los posteriores análisis.
- Definir el tipo de aplicación: es decir, si la aplicación se hará de manera individual o colectiva; con o sin la presencia del investigador.
- Definir la muestra de aplicación: es decir, definir el tamaño de la muestra sobre la cual se va aplicar la prueba. Se exige que se aplique al menos a 20 sujetos.
- Obtener la matriz de respuestas directas: una vez aplicada la prueba se obtendrá, y así debe aportarse en el trabajo, una primera matriz de datos con las respuestas directas de los sujetos.
- Es decir, una matriz con tantas filas como sujetos, tantas columnas como ítems tenga la prueba, y en cada una de las celdas aparecerá la respuesta directa (“A”, “B”, “C”…) dada por el sujeto al ítem.
- Se recomienda añadir una columna inicial a la izquierda que incluya un identificador del sujeto (“Sujeto1”, “Sujeto2”, “Sujeto3”…o “ID1”, “ID2”, “ID3”…).
- Obtener la matriz de aciertos/errores: es decir, a partir de la matriz anterior, debe obtenerse, y aportarse en el trabajo, una segunda matriz en donde cada una de las respuestas directas sea sustituida por “0” (en caso de respuesta incorrecta) o “1” (en caso de respuesta correcta”).
- Cálculo de la puntuación total de cada sujeto en la prueba: finalmente, a la matriz de aciertos/errores, se le añadirá una columna adicional que contendrá la puntuación total de cada sujeto en la prueba.
- Para simplificar los posteriores análisis, se permite calcular la puntuación total como simple suma de aciertos del sujeto a lo largo de la prueba (es decir, sin hacer la corrección por azar = los fallos no restan).
- Calcular el Índice de Dificultad (ID’), para todos y cada uno de los ítems que componen la prueba. En este caso, sí que se exige que se calcule aplicando la corrección debida a los efectos del azar. Se pide igualmente representar de manera gráfica cómo evoluciona el ID’ a lo largo de los ítems de la prueba.
- Escoger 1 de los ítems de la prueba (se recomienda escoger un ítem de dificultad media), y sobre el mismo calcular:
- Índice de Discriminación (D). Para simplificar, por ejemplo en el caso de tener 20 sujetos, se puede coger como ‘extremo superior’ el 25% de sujetos (=5 sujetos) con mayor puntuación en la prueba, y como ‘extremo inferior’ el 25% de sujetos (=5 sujetos) con menor puntuación en la prueba.
- Índice de Homogeneidad (IH). Se recomienda utilizar el procedimiento de correlación ítem – total (excluido el ítem).
- Análisis de los Distractores. Es decir, comprobar la equiprobabilidad de los distractores mediante la prueba Ji-Cuadrado.
- Calcular la fiabilidad de la prueba en su conjunto, como consistencia interna. Se admite tanto el procedimiento de las dos mitades como el alfa de Cronbach.
- Definir un criterio externo relevante para estudiar la validez criterial de la prueba. (Por ejemplo, “nota media en Matemáticas obtenida en la última evaluación de 5º Primaria”).
- Tras definir de manera justificada el criterio elegido, deberá añadirse a la matriz de acierto/error una nueva columna con la puntuación directa de cada sujeto en dicho criterio (que será necesariamente una puntuación simulada).
- Calcular la validez criterial de la prueba, con respecto al criterio previamente definido.
- Baremar la prueba: se pide calcular el valor de los deciles (percentil 10, 20,…, 80, 90) y cuartiles (percentil 25, 50, 75), correspondientes a la puntuación total en la prueba.
- OPCIONAL: De manera opcional, se pide transformar las puntuaciones totales de los sujetos en la prueba a puntuaciones típicas (z).
- Valorar los Índices de Dificultad (ID’) obtenidos:
- ¿Cuáles son los dos ítems más fáciles de la prueba?
- ¿Cuáles son los dos ítems más difíciles?
- ¿Cuál es el ID’ promedio de la prueba?
- ¿La prueba en su conjunto es de dificultad baja, media, alta?
- ¿Sigue la prueba la recomendación de presentar los ítems en dificultad creciente (los más fáciles al principio y los más difíciles al final)?
- Para el ítem escogido, valorar el Índice de Discriminación (D), el Índice de Homogeneidad, y la equiprobabilidad de sus distractores.
- En conjunto, ¿cómo valorarías la calidad de este ítem? ¿lo incluirías en una próxima versión perfeccionada de tu prueba?
- ¿Por qué?
- Valorar la fiabilidad de la prueba: ¿Cómo dirías que es la fiabilidad de tu prueba? ¿Excelente, Buena, Aceptable, Cuestionable…?
- Dada la fiabilidad encontrada, ¿crees que puedes extraer conclusiones de tus resultados?
- En caso de que tu prueba tenga una fiabilidad por debajo de 0,80, ¿cómo podrías incrementarla?
- Valorar la validez criterial de la prueba: ¿Cómo dirías que es la validez criterial de la prueba? ¿Cómo interpretas el valor de validez criterial que has obtenido?
- Aplicación práctica de la baremación realizada:
- ¿Qué sujetos se encuentran por debajo del percentil 20? ¿les aplicarías alguna medida educativa especial?
- ¿qué sujetos se encuentra por encima del percentil 80? ¿les aplicarías alguna medida educativa especial?
- Valoración global de la prueba construida.
- ¿Cuáles crees que son los puntos fuertes de tu prueba?
- ¿Cuáles son sus puntos débiles?
- ¿Cómo crees que se podría mejorar para el futuro?
- ¿Qué has aprendido?
- ¿Qué competencias has adquirido?
- ¿Cómo relacionas dichas competencias con tu futuro perfil profesional de pedagogo/a?
- ¿Tienes algún comentario o sugerencia al respecto de esta “Práctica A”?
Criterios de Evaluación: La “Práctica A” será calificada en la convocatoria ordinaria por el Tutor/a del Centro Asociado (y por el Equipo Docente de la Sede Central en la convocatoria extraordinaria), a través de la plataforma virtual, en una escala de 0 a 10 puntos. Para evaluar la práctica, se aplicarán los siguientes criterios:
- Adecuado diseño y construcción de la prueba: 20% de la calificación.
- Adecuada aplicación y puntuación de la prueba: 20% de la calificación.
- Adecuado análisis de las propiedades métricas: 30% de la calificación.
- Adecuada valoración de las propiedades métricas: 20% de la calificación.
- Adecuada reflexión final: 10% de la calificación.
Formato de Entrega: La “Práctica A” se debe entregar en formato Word (.doc, .docx), y con las matrices de datos en formato de tabla editable (no como imagen), de forma que el Tutor/a o Equipo Docente pueda copiar/pegar dicha información en una hoja de cálculo para hacer las comprobaciones necesarias. Se recomienda letra Times New Roman, tamaño de 12 puntos, interlineado 1,15 o 1,5. La extensión orientativa del trabajo es de 15-20 páginas (sin contar anexos).
Comentarios
Publicar un comentario