Professional Documents
Culture Documents
Prof. Julio E. Rodrguez Torres Prof. Nadia Cordero Centro para la Excelencia Academica Oficina de Evaluacin del Aprendizaje Estudiantil Decanato de Asuntos Acadmicos - UPR-RP 14 de octubre de 2011
Establecer los niveles de desempeo para una ejecucin de excelente y para una ejecucin de iniciado.
Marco de referencia
El marco de referencia para esta presentacin se apoya en lo siguiente:
En la revisin de la literatura del rea de desarrollo de rbricas. En lo que indican las teoras sicomtricas sobre la construccin de instrumentos.
Ciclo evaluativo
Se planifica
Se proponen acciones
Se pone en accin
Qu deben hacer los profesores que interesan evaluar las destrezas de investigacin?
Redactar objetivos de aprendizaje para el avalo de destrezas
de investigacin.
evaluar la ejecucin.
esperado.
Dominios del Aprendizaje Estudiantil del Recinto (Perfil del Egresado- Certificacin 46 del Senado Acadmico, 2005-2006)
Comunicacin Conocimiento, Sensibilidad tica y
Efectiva (oral y escrita) Pensamiento Crtico Investigacin y Creacin Responsabilidad Social Razonamiento Lgico-Matemtico Competencias de Informacin Trabajo en Equipo
destrezas y actitudes propias de la disciplina Integracin del Conocimiento Capacidad para Estudio Independiente Curiosidad Intelectual Aprendizaje Continuo
Esttica Aprecio, Cultivo y Compromiso con los ideales de la sociedad puertorriquea, caribea e internacional
Qu es una rbrica?
La rbrica es una matriz de valoracin en la cual se
establecen los criterios y los indicadores de desempeo a travs de una escalas para determinar la calidad de la ejecucin de los estudiantes en unas tareas especficas dentro de un continuo.
Permite obtener una medida aproximada,
Tipos de rbricas
Generalmente se conocen dos tipos de rbricas la
proceso o producto sin juzgar por separado las partes que lo componen.
separado, las diferentes partes del producto o desempeo y luego se suma el puntaje de estas para obtener una calificacin total (Moskal, 2000; Nitko, 2001).
Oficina de Evaluacin del Aprendizaje Estudiantil
Rbricas holsticas
El uso de las matrices de valoracin holsticas para
calificar, puede resultar en un proceso ms rpido que utilizar las rbricas analticas con el mismo fin.
valoracin general, casi siempre se usan cuando el propsito de la valoracin es por su naturaleza sumativo.
retroalimentacin al estudiante.
Rbricas analticas
Las rbricas analticas se prefieren cuando requiere un
criterios evaluados, lo que no sucede con el enfoque holstico. Lo anterior hace posible crear un "perfil" de las fortalezas y debilidades especficas de cada estudiante, y en agregado del grupo, con el fin de establecer un curso de accin para mejorar stas ltimas.
valoracin formativa.
Ejemplo de criterios al evaluar Destrezas de Comunicacion Escrita en reas evaluadas en una composicin
Tema y Estructura
Introduccin Desarrollo Conclusin
Dominio Lxico
Riqueza Lxica Precisin y Concisin
Correccin
Acentuacin Uso de Maysculas
Ejercicio #1
Trabajo en grupos: Generar por lo menos cuatro criterios a evaluar en una posible investigacin a ser realizada por el estudiante.
Posibles criterios
Introduccin Revisin de literatura Metodologa Recopilacin de datos Anlisis de los datos Conclusiones Recomendaciones
Oficina de Evaluacin del Aprendizaje Estudiantil
Elementos de la rbrica
Criterios caracterizan la conducta esperada o requerida
los cuales cuantificamos la ejecucin de los estudiantes para, de este modo, facilitar una medicin ms precisa y objetiva.
Modelo de rbrica
Niveles / Escala
Criterios a evaluar
Indicadores de desempeo
evaluar: un (unos) objetivo(s), desempeo(s), comportamiento(s), competencia(s) o actividad(es). Determine cules va a evaluar. (validez)
desempeo especficos que va a utilizar para llevar a cabo la evaluacin de esas reas. (validez)
Esto es, establezca los indicadores de desempeo que puede alcanzar el estudiante.
calificar los diversos criterios a evaluar, se ubica en la fila horizontal superior, con una gradacin que va de mejor a peor.
Es muy importante que la gradacin de esta escala sea obvia y precisa para que exista diferencia en los distintos grados que se pueden lograr en el aprendizaje propuesto.
En las celdas centrales se describe, de la forma ms clara y concisa posible, el nivel de desempeo o ejecucin, esto es, los indicadores que se van a utilizar para evaluar esos criterios.
Recuerde que estas celdas centrales explican cules son las caractersticas de un trabajo excelente, de uno deficiente y las variaciones intermedias entre el uno y el otro.
Oficina de Evaluacin del Aprendizaje Estudiantil
Seis niveles No satisfactorio, Poco satisfactorio, Satisfactorio, Muy satisfactorio, Bueno, Excelente
Consideracin importante:
La Junta de Directores de la Asociacin Americana de Colegios y Universidades (AACU) sugiere cuatro niveles.
Oficina de Evaluacin del Aprendizaje Estudiantil
Ejercicio #2
Trabajo en grupo:
Comenzar el desarrollo de una rbrica para avaluar el desempeo de nuestros estudiantes en destrezas de investigacin.
Escoger por lo menos dos de los criterios para evaluar destrezas de investigacin que su grupo escogi. Trabajar los indicadores de desempeo para una ejecucin Excelente y el extremo opuesto a Excelente para esos dos criterios.
Criterio: Introduccin
Que reas podramos medir (subcriterios) bajo el criterio de Introduccin ?
Establecer el problema de investigacin.
Criterio: Metodologa
Que reas podramos medir (subcriterios)bajo el criterio de Metodologa ?
Indicar el tipo de investigacin. Describir el diseo.
Satisfactorio 5-6
Se plantea el problema y el propsito de la investigacin pero la justificacin o significado terico-prctico no est claramente sustentado. La evidencia que presenta a veces no es relevante Las preguntas o hiptesis se relacionan con el problema.
En progreso 3-4
Se plantea el problema y el propsito pero es poco relevante. Presenta confusin en la justificacin en trminos de su significado terico-prctico y la evidencia que presenta.
Las preguntas o hiptesis necesitan mejorarse para relacionarse con el problema.
Iniciado 1-2
INTRODUCCIN
Preguntas de investigacin
En progreso 3-4
La revisin de literatura tiene una relacin limitada con el problema bajo estudio. Las fuentes no estn actualizadas. La revisin es limitada y se relaciona un poco con algunas variables.
Iniciado 1-2
La revisin de literatura tiene muy poca o ninguna relacin con el problema bajo estudio.
REVISIN DE LITERATURA
La revisin de literatura tiene Relacin con mucha relacin con el el tema de problema bajo estudio. Las investigacin fuentes son muy actualizadas (ltimos 5 aos).
Extensin
FUENTES DE INFORMACIN
Variedad
Las fuentes de informacin son variadas y se utilizan textos importantes de distintos autores reconocidos en el rea.
Las fuentes de informacin son variadas. Se utilizan textos de distintos autores reconocidos en el rea.
La variedad de las fuentes de informacin es limitada. Algunos textos de autores reconocidos en el rea no son consultados. Entre 59% y 40% de las fuentes de informacin provienen de textos con autoridad o revistas arbitradas.
Las fuentes de informacin son muy pocas. Se utilizan muy pocos textos de autores reconocidos en el rea.
Calidad
El 80% o ms de las fuentes de informacin provienen de textos con autoridad o revistas arbitradas.
Entre 79% y 60% de las fuentes de informacin provienen de textos con autoridad o revistas arbitradas.
Menos del 39% de las fuentes de informacin provienen de textos con autoridad o revistas arbitradas.
Excelente 7-8
Se describe de manera detallada el diseo. El diseo es adecuado para contestar las preguntas o hiptesis. La poblacin del estudio y la muestra fueron identificadas. El mtodo de muestreo fue descrito con claridad.
Satisfactorio 5-6
Se describe el diseo parcialmente. El diseo es adecuado para contestar las preguntas o hiptesis. Se identifica la muestra pero no la poblacin. Se presenta el mtodo de muestreo. Los instrumentos son adecuados para recopilar los datos. Se presenta evidencia de validez y de su confiabilidad. Se explica el proceso que se utilizar para proteger el anonimato de los participantes y la confidencialidad de la informacin recopilada. Se explica los posibles riegos y beneficios asociados a la participacin en el estudio.
En progreso 3-4
Se describe el diseo de manera superficial. El diseo es adecuado. Se identifica la muestra pero no el mtodo de muestreo.
Iniciado 1-2
El diseo presentado no cumple con el propsito del estudio. Se identifica la muestra pero no el mtodo de muestreo.
Poblacin y muestra
METODOLOGA
Los instrumentos son adecuados para recopilar los Fase de datos. Se establecen instrumentacin evidencias contundentes de la validez y la confiabilidad. Se explica detalladamente el proceso que se utilizar para Anonimato y proteger el anonimato de los confidencialidad participantes y la confidencialidad de la informacin recopilada.
Los instrumentos son adecuados para recopilar los datos. La evidencia que se presenta de la validez y confiabilidad es limitada. Se explica de forma limitada el proceso que se utilizar para proteger el anonimato de los participantes y de manera superficial la confidencialidad de la informacin recopilada. Se explica de forma limitada los posibles riegos y de manera superficial los beneficios asociados a la participacin en el estudio.
Presenta instrumentos pero los mismos no son adecuados para recopilar los datos. No se presenta evidencia de confiabilidad y validez de los instrumentos. No se explica el proceso que se utilizar para proteger el anonimato de los participantes y la confidencialidad de la informacin recopilada. No explica los posibles riegos y beneficios asociados a la participacin en el estudio.
Riesgos y beneficios
Satisfactorio 5-6
La recopilacin de datos es explicada de manera parcial. Las instrucciones para la administracin de los instrumentos son claras.
En progreso 3-4
La recopilacin de datos es explicada de manera superficial. Las instrucciones para la administracin de los instrumentos presentan confusin. Se utilizan los protocolos para la proteccin de los sujetos.
Iniciado 1-2
La recopilacin de datos no est explicada de manera detallada. Las instrucciones para la administracin de los instrumentos no son claras ni precisas. No se utilizan los protocolos para la proteccin de los sujetos.
RECOPILACIN DE DATOS
Proceso
Instrucciones
Protocolo
ANLISIS DE DATOS
Codificacin
Se explican las escalas de medicin pero no se indica cmo se codifican los datos.
Se explican las escalas de medicin pero no se indica cmo se codifican los datos.
El anlisis estadstico es adecuado para contestar las preguntas o someter a prueba las hiptesis.
El anlisis estadstico es adecuado para contestar las preguntas o someter a prueba las hiptesis.
El anlisis estadstico presenta limitaciones para contestar las preguntas o someter a prueba las hiptesis.
El anlisis estadstico no es adecuado para contestar las preguntas o someter a prueba las hiptesis.
En progreso 3-4
Algunas de las conclusiones contestan las preguntas de investigacin. Algunas conclusiones surgen del anlisis de resultados. Se incorpora de manera muy limitada la revisin de literatura en las conclusiones. Las recomendaciones sugieren un anlisis superficial de las implicaciones de las conclusiones. Las recomendaciones describen de forma limitada como pudiese examinase algn aspecto para un futuro estudio.
Iniciado 1-2
Las conclusiones no contestan de manera clara las preguntas de investigacin. Las conclusiones son muy generales e imprecisas. No se incorpora la revisin de literatura en las conclusiones. Se percibe muy poco o no se percibe en las recomendaciones un anlisis crtico profundo de las implicaciones de las conclusiones. Las recomendaciones describen muy poco o ninguna forma de examinar algn aspecto para un futuro estudio.
CONCLUSIONES RECOMENDACIONES
Respuesta a las Las conclusiones contestan preguntas de de manera clara las investigacin preguntas de investigacin. Anlisis crtico Las conclusiones surgen del de los anlisis de resultados. resultados Incorporacin Se incorpora la revisin de de la revisin de literatura en las conclusiones. literatura
Las recomendaciones
Recomendacio- sugieren un nuevo enfoque nes para futuros metodolgico con el examinar algn aspecto para estudios
un futuro estudio.
Las recomendaciones
Las recomendaciones sugieren formas de examinar algn aspecto para un futuro estudio.
Satisfactorio 5-6
Redacta con errores menores el trabajo siguiendo las recomendaciones del manual de estilo en lo siguiente: uso de ttulos y subttulos, vocabulario tcnico y presentacin de datos en tablas, notacin estadstica, fichas bibliogrficas y enumeracin en el texto. Hace referencias directas e indirectas de las fuentes bibliogrficas que consult usando el estilo recomendado en el manual con errores menores en algunas citas y referencias utilizadas. Algunas referencias que componen la bibliografa estn escritas con errores menores segn el manual de estilo utilizado.
En progreso 3-4
Redacta con muchos errores el trabajo siguiendo las recomendaciones del manual de estilo en lo siguiente: uso de ttulos y subttulos, vocabulario tcnico y presentacin de datos en tablas, notacin estadstica, fichas bibliogrficas y enumeracin en el texto. Hace referencias directas e indirectas de las fuentes bibliogrficas que consult usando el estilo recomendado en el manual con muchos errores en algunas citas y referencias utilizadas. La mitad o ms de las referencias que componen la bibliografa estn escritas con errores mayores segn el manual de estilo utilizado.
Iniciado 1-2
Formato y estilo
Manual de estitlo
Utiliza el manual de estilo inconsistentemente en el escrito, presenta errores en todas las citas y referencias utilizadas o no utiliza el manual de estilo.
Hace referencias directas e indirectas de las fuentes Referencias bibliogrficas que consult en el texto usando el estilo recomendado en el manual.
No hace referencias directas e indirectas de las fuentes bibliograficas que consulto usando el estilo el estilo recomendado en el manual.
Las referencias que componen la bibliografa estn escritas Bibliografa correctamente segn el manual de estilo utilizado.
Las referencias que componen la bibliografa estn escritas incorrectamente segn el manual de estilo utilizado.
Recuerde que estamos para ayudarle a fortalecer el proceso de aprendizaje de sus estudiantes!