1. LAS CONCEPCIONES EVALUATIVAS DE SCRIVEN Para Scriven la evaluación consiste en determinar el valor y la calidad de algo y las evaluaciones son los resultados de dicho proceso. Ello implica determinar:

- los criterios de su mérito, desde las necesidades de mejora concretadas en las metas que pretende el programa - las normas de mérito, o los indicadores que reflejan las metas, que nos van a permitir comprobar la realización

La comparación entre lo deseable, lo posible y lo conseguido nos permitirá obtener los resultados, y así realizar el juicio evaluativo, procurando siempre que el resultado de la evaluación sea comprendido por quien se quiera que reciba esa información: el director de un centro, la asociación de padres, los profesores, los alumnos, … Los términos evaluación formativa y evaluación sumativa, acuñados por Scriven, están relacionados con 2 modos de sensibilidad hacia las necesidades de los programas. La evaluación formativa es realizada desde el inicio del programa y durante su desarrollo con el fin de recoger información útil, y a tiempo, de los efectos del programa para introducir cambios de mejora. La evaluación sumativa es realizada una vez que ha terminado el programa, o en determinados momentos claves del mismo, y su objetivo principal es recoger información sobre el valor y mérito del programa, sobre los resultados finales. La evaluación formativa es fundamental para la mejora continua de lo que se está evaluando, pero debe estar también al servicio de la evaluación sumativa, que es el máximo objetivo de la evaluación. Scriven considera que el evaluador debe atender no sólo las demandas del que toma las decisiones, de la persona que contrata al evaluador, sino que debe atender también a las personas que son evaluadas, recoger sus necesidades y darle respuesta informándole de los resultados de la evaluación.

2.PRINCIPALES CONCEPCIONES DE CRONBACH SOBRE LA EVALUACIÓN DE PROGRAMAS. Para Cronbach la evaluación deber ser plural tanto en sus elementos como en los temas con los que trabaje. También está convencido de la posibilidad de generar conocimiento que permita extrapolarse a personas, situaciones, tratamientos y observaciones estudiadas para relacionarlas con poblaciones y clases no estudiadas. Cronbach trata de resolver la limitación existente de los diseños de investigación, los cuales se interesan más por la validez interna que por la externa. Llamó a su teoría “funcional”. Cronbach aplica su teoría en planes para futuros programas que están siendo puestos en funcionamiento con la intención de imitar las condiciones de su futura implantación. En su libro de 1980 este era uno de los 4 contextos donde la evaluación cumplía su función. Los contextos eran: - iniciación del programa - superrealización del programa - prototípico - aplicación real del programa, cuando se pone en funcionamiento de un modo normal Cronbach no considera importante este último estadio, el de aplicación real del programa, ya que es inmune a una evaluación seria; difícilmente se consideran los resultados de una evaluación cuando un programa está ya funcionando, es mucho más eficaz en el período prototípico, que equivaldría a la aplicación piloto del programa, donde las condiciones de aplicación deben ser lo más idénticas a la realidad. Pero Cronbach reconoce que las evaluaciones de programas en funcionamiento pueden contribuir a mejorar elementos que trabajan mal y, de esa manera, repercutir positivamente en la totalidad del programa y en todas las situaciones y ámbitos en los que se aplica. 3. FINALIDAD DE LA LISTA DE LAS CLAVES DE CONTROL PARA LA EVALUACIÓN DE PROGRAMAS.

La lista de las claves de la evaluación para la evaluación de programas, de políticas y la evaluación de sus evaluaciones (LCE), ha sido tomada de Scriven.

La lista de las claves para la evaluación es una herramienta para el evaluador activo, o práctico, a quien se le supone conocimientos básicos sobre la disciplina de la evaluación y de su vocabulario específico.

El término 'evaluación' se utiliza para significar la determinación del mérito, valor, o significación (abreviado el m/v/s) del objeto evaluado.

Ésta no es una lista de control lineal, sino reiterativa, es decir, debe revisarse más de una vez, y con distintos propósitos, por ejemplo, para el diseño de un programa, o para la evaluación de la evaluación. 4.LAS NORMAS DE JOINT COMITÉ PARA LA EVALUACIÓN DE PROGRAMAS. Incluimos una síntesis de las normas del Joint Committee on standards for evaluación, por las que deben ser juzgadas las evaluaciones: - Normas de utilidad: Para asegurar que sirve a las necesidades de información práctica, centrada en cuestiones importantes. Los estándares de utilidad guiarán la evaluación de tal forma que sean relevantes, oportunos y de influencia. Deben facilitar informes basados en evidencias, sobre aspectos positivos y negativos y debe aportar soluciones para mejorar. - Normas de viabilidad: Para asegurar que la evaluación es realista y prudente. Debe utilizar procedimientos eficientes que no ocasionen demasiados problemas. Los estándares de viabilidad reconocen que las evaluaciones se realizan en contextos naturales, sus diseños deben ser operativos y sus gastos, en material, personal o tiempo, no deben exceder al requerido por las cuestiones de la evaluación. - Normas de honradez: Para asegurar que la evaluación es conducida legal y éticamente, basada en compromisos explícitos, que aseguren la necesaria cooperación, la protección de los grupos implicados, y la honestidad de los resultados. - Normas de precisión: Para asegurar que la evaluación revela comunica lainformación encontrada; describe con claridad el objeto evaluado en su evolución yen su contexto; revela las virtudes y defectos de/ plan de evaluación, de losprocedimientos y de las conclusiones (nieta-evaluación) y proporciona conclusiones válidas y fidedignas. Las conclusiones y los juicios deben ser coherentes con los datos, 5. LA DEFINICIÓN DE EVALUACIÓN DE PROGRAMAS DE STUFFLEBEAM. Stufflebeam define la evaluación como un proceso mediante el cual se proporciona información útil para la toma de decisiones. Así pues, la evaluación consiste en un proceso con 3 etapas: identificar, obtener y proporcionar información acerca de un progrma valorado en sus metas, su planificación, su realización y su impacto, con la finalidad de guiar la toma de decisiones, proporcionar información y contribuir a su comprensión, y con el criterio de responder a las necesidades y de calidad.

6. DEFINICIÓN DE EVALUACIÓN FORMATIVA Y EVALUACIÓN SUMATIVA. La evaluación formativa es realizada desde el inicio del programa y durante su desarrollo con el fin de recoger información útil, y a tiempo, de los efectos del programa para introducir cambios de mejora. La evaluación sumativa es realizada una vez que ha terminado el programa, o en determinados momentos claves del mismo, y su objetivo principal es recoger información sobre el valor y mérito del programa, sobre los resultados finales.

7. LA DEFINICIÓN DE CALIDAD EN EDUCACIÓN. La OCDE (1995) define la educación de calidad como aquella que "asegura a todos los jóvenes la adquisición de los conocimientos, capacidades destrezas y actitudes necesarias para equipararles para la vida adulta".

No obstante hay que tener en cuenta que no es lo mismo preparar para la vida adulta en un entorno rural, relativamente sencillo y estable, que en el entorno complejo y cambiante de una enorme ciudad; ni es lo mismo educar aceptando sin más el modelo actual de sociedad que considerando la posible construcción de un mundo mejor para todos.

Otra definición sería: "La escuela de calidad es la que promueve el progreso de sus estudiantes en una amplia gama de logros intelectuales, sociales, morales y emocionales, teniendo en cuenta su nivel socioeconómico, su medio familiar y su aprendizaje previo. Un sistema escolar eficaz es el que maximiza la capacidad de las escuelas para alcanzar esos resultados."

8. DEFINICIÓN DE AUTOEVALUACIÓN APLICADA A LA EVALUACIÓN DE ORGANIZACIONES EDUCATIVAS.

La evaluación de un programa se hace con la finalidad de constatar el grado de eficacia con que consigue logra las metas para las que fue elaborado. Dada la complejidad que encierra un programa, es asumirle que puede mejorarse. Y para poder llevar a cabo las decisiones de mejora cobra sentido la actividad evaluativa. Esta actividad evaluativa está pensada para ser realizada en tres momentos, cada uno de ellos con entidad y objetivos propios, y juntos contribuyen a la mejora del programa en su totalidad. 9. HAGA UNA SINTESIS DEL MODELO DE EVALUACIÓN DE PROGRAMAS CIPP DE STUFFLEBEAM Y COLABORADORES. Estos autores desarrollaron un marco conceptual para ayudar a los organizadores y administradores

a enfrentarse a los cuatro tipos de evaluaciones, que abarca el modelo, junto con sus correspondientes

decisiones, que, en síntesis, consiste en lo siguiente: 1 La evaluación del contexto, para servir a la toma de decisiones de planificación, que, tras el

análisis de las necesidades del contexto, deberá determinar las necesidades de elaboración, o selección,

de un programa educativo, con una clara definición de sus propósitos o de sus objetivos, para atender a

las necesidades detectadas. 2. La evaluación de entrada, al servicio de las decisiones de organización,

estructurales, que nos indican los recursos disponibles, y los que serían ne cesa rios , las

diferentes es tra tegas alterna tivas para mejorar la aplicación del programa, y los planes que

aportan un mayor potencial p a ra d is eñ a r l a pl an if i c ac ión qu e ori en te c óm o d eb e s e r

a pl ic ad o el programa.

3. La evaluación de proceso, al servicio de las decisiones de implementación qu e n os i nform ará

s ob re c óm o s e e s tá re al i za nd o el p la n p rev is to y las revisiones necesarias para mejorar la

aplicación del programa.

4. La evaluación de producto, al servicio de las decisiones de reciclaje, que nos aportará

información sobre los resultados obtenidos,informando acerca de cómo han sido

reducidas las necesidades, enintensidad, adecuación, y calidad, y, de acuerdo con los

resultados, or i e n ta r á s ob re q u é s e d e b e h a c e r c on e l p r ogr a m a d e s p u é s d e s u

aplicación.

10. EL MODELO DE EVALUACIÓN PROGRAMAS DE LA FIGURA DE STAKE. Estos autores desarrollaron un marco conceptual para ayudar a los organizadores y administradores a enfrentarse a los cuatro tipos de evaluaciones, que abarca el modelo, junto con sus correspondientes decisiones, que, en síntesis, consiste en lo siguiente: 1 La evaluación del contexto, para servir a la toma de decisiones de planificación, que, tras el análisis de las necesidades del contexto, deberá determinar las necesidades de elaboración, o selección, de un programa educativo, con una clara definición de sus propósitos o de sus objetivos, para atender a las necesidades detectadas. 2. La evaluación de entrada, al servicio de las decisiones de

organización, estructurales, que nos indican los recurso s disponibles, y los que serían necesarios, las diferentes estrategas alternativas para mejorar la aplicación del programa, y los planes que aportan un mayor potencial para diseñar la planificación que oriente cómo debe ser aplicado el programa.

3. La evaluación de proceso, al servicio de las decisiones de implementación que nos informará sobre cómo se está realizando el plan previsto y las revisiones necesarias para mejorar la aplicación del programa.

4. La evaluación de producto, al servicio de las decisiones de reciclaje, que nos aportará información sobre los resultados obtenidos, informando acerca de cómo han sido reducidas las necesidades, en intensidad, adecuación, y calidad, y, de acuerdo con los resultado,

orienta rá sobre qué se debe hacer con el prog rama después de su aplicación. 12. COMENTE LAS PRINCIPALES APORTACIONES DE SCRIVEN A LA EVALUACIÓN DE PROGRAMAS Y A LA EDUCACIÓN. Para Scriven la evaluación consiste en determinar el valor y la calidad de algo y las evaluaciones son los resultados de dicho proceso. Ello implica determinar:

- los criterios de su mérito, desde las necesidades de mejora concretadas en las metas que pretende el programa - las normas de mérito, o los indicadores que reflejan las metas, que nos van a permitir comprobar la realización

La comparación entre lo deseable, lo posible y lo conseguido nos permitirá obtener los resultados, y así realizar el juicio evaluativo, procurando siempre que el resultado de la evaluación sea comprendido por quien se quiera que reciba esa información: el director de un centro, la asociación de padres, los profesores, los alumnos, … Los términos evaluación formativa y evaluación sumativa, acuñados por Scriven, están relacionados con 2 modos de sensibilidad hacia las necesidades de los programas. La evaluación formativa es realizada desde el inicio del programa y durante su desarrollo con el fin de recoger información útil, y a tiempo, de los efectos del programa para introducir cambios de mejora. La evaluación sumativa es realizada una vez que ha terminado el programa, o en determinados momentos claves del mismo, y su objetivo principal es recoger información sobre el valor y mérito del programa, sobre los resultados finales. La evaluación formativa es fundamental para la mejora continua de lo que se está evaluando, pero debe estar también al servicio de la evaluación sumativa, que es el máximo objetivo de la evaluación. Scriven considera que el evaluador debe atender no sólo las demandas del que toma las decisiones, de la persona que contrata al evaluador, sino que debe atender también a las personas que son evaluadas, recoger sus necesidades y darle respuesta informándole de los resultados de la evaluación.

13. HAGA UNA SÍNTESIS DEL MODELO EUROPEO DE EXCELENCIA ADAPTADO A LOS CENTROS EDUCATIVOS. 14. QUE METODOLOGIAS DE INVESTIGACIÓN PROPONE CRONBACH PARA EL DISEÑO DE EVALUACIONES DE PROGRAMAS. Los métodos para generalizar desde los utos a los UTOS son: - Una clara especificación de los planes y las acciones que generan datos y desarrollan una conclusión a partir de los mismos - Controles sobre la realización de los acontecimientos del programa y las operaciones evaluativos - Restricciones de la indagación y de las inferencias a unos comparativamente estrechos y homogéneos UTOS La generalización de los UTOS a los UTOS, que no corresponden a las poblaciones estudiadas, es más complejo, y corresponde al concepto de la validez externa: la extrapolación de la información más allá de las poblaciones estudiadas. 3 estrategias para realizar la extrapolación: Analizar los datos de subpoblaciones, disponibles en los estudios que se han hecho, seleccionando de los mismos la subpoblación más próxima y similar al programa y población que interesa al patrocinador que nos pide la información A través de una explicación causal. Es decir, explicar cómo un tratamiento tiene un particular efecto. Las explicaciones promueven la transferencia porque dicen qué procesos deben ocurrir para conseguir un efecto y estimula el pensamiento sobre los diferentes modos molares en los cuales uno podría activar un particular proceso de mediación. Es el mejor modo de promover la validez externa En relación con el modo en que los hallazgos de la evaluación son diseminados. Para ello los evaluadores deben presentar la información de un modo narrativo; de un modo vívido, colorista, detallista, frecuente, informal y sensible a las singulares necesidades de cada audiencia

15. DEFINICIÓN DE EVALUACIÓN DE PROGRAMAS DE PÉREZ JUSTE.

Para Pérez Juste la evaluación de programas es una actividad pedagógica orientada a la mejora de los programas, del educando y del educador, de una manera directa, e indirectamente también actúa en la mejora de variables organizativas y técnicas y medioambientales, sobre los programas mismos. Por programa educativo entiende un plan sistemático de intervención, específica e intencionalmente elaborado, al servicio de metas consideradas valiosas desde una perspectiva pedagógica. Los programas educativos vienen definidos por las notas siguientes: Complejidad. Dificultad. Duración. Procesualidad. Mantenimiento y transferencia.. 16. LAS LISTAS DE LAS CLAVES DE CONTROL PARA LA EVALUACIÓN Y LA META-EVALUACIÓN. La lista de las claves para la evaluación es una herramienta para el evaluador activo, o práctico, a quien se le supone conocimientos básicos sobre la disciplina de la evaluación y de su vocabulario específico. El término 'evaluación' se utiliza para significar la determinación del mérito, valor, o significación (abreviado el m/v/s) del objeto evaluado. Ésta no es una lista de control lineal, sino reiterativa, es decir, debe revisarse más de una vez, y con distintos propósitos, por ejemplo, para el diseño de un programa, o para la evaluación de la evaluación. La meta-evaluación Es decir, la evaluación de la evaluación para identificar sus fortalezas, sus limitaciones y otros usos. La meta -evaluación debe ser hecha siempre por el evaluador, de un modo tan amplio como sea posible, corno de control de calidad, una vez finalizada la evaluación, pero no sólo, dado que se puede hacer dm-ante la evaluación. Y, siempre que sea posible, también debe ser realizada por tur evaluador externo de la evaluación (un meta evaluador). El criterio fundamental de mérito de las evaluaciones es la validez, junto con la utilidad, —normalmente para los clientes, las audiencias y los promotores—, y la credibilidad. 17.FINALIDAD DE LAS LISTAS DE LAS CLAVES DE CONTROL PARA LA EVALUACIÓN DE PROGRAMAS.

La lista de las claves de la evaluación para la evaluación de programas, de políticas y la evaluación de sus evaluaciones (LCE), ha sido tomada de Scriven. La lista de las claves para la evaluación es una herramienta para el evaluador activo, o práctico, a quien se le supone conocimientos básicos sobre la disciplina de la evaluación y de su vocabulario específico. El término 'evaluación' se utiliza para significar la determinación del mérito, valor, o significación (abreviado el m/v/s) del objeto evaluado. Ésta no es una lista de control lineal, sino reiterativa, es decir, debe revisarse más de una vez, y con distintos propósitos, por ejemplo, para el diseño de un programa, o para la evaluación de la evaluación. 18. DIFERENCIAS ENTRE LAS CONCEPCIONES EVALUATIVAS DE STUFFLEBEAM Y DE STAKE. Stufflebeam define la evaluación como un proceso mediante el cual se proporciona información útil para la toma de decisiones. Así pues, la evaluación consiste en un proceso con 3 etapas: identificar, obtener y proporcionar información acerca de un progrma valorado en sus metas, su planificación, su realización y su impacto, con la finalidad de guiar la toma de decisiones, proporcionar información y contribuir a su comprensión, y con el criterio de responder a las necesidades y de calidad. Stake ve la evaluación como servicio: La gente espera de la evaluación diferentes propósitos tales corno la

documentación de los acontecimientos, el registro de los cambios, la ayuda a la toma de decisiones, la

comprensión o la facilitación de soluciones. 19. LAS NORMAS DE EXACTITUD DE JOINT COMITÉ PARA LA EVALUACIÓN DE PROGRAMAS. La utilización de las normas del Joint Comite on standards for evaluación cumplen la función de la meta-evaluación para asegurar que la evaluación ha sido viable, útil y realizada de manera honrada y precisa. - Normas de precisión: Para asegurar que la evaluación revela comunica la información encontrada; describe con claridad el objeto evaluado en su evolución y en su contexto; revela las virtudes y defectos de/ plan de evaluación, de los procedimientos y de las conclusiones (nieta-evaluación) y proporciona conclusiones válidas y fidedignas. Las conclusiones y los juicios deben ser coherentes con los datos. 20. LA FINALIDAD DE LA EVALUACIÓN, O FINALIDADES SEGÚN PÉREZ JUSTE.

Pérez Juste concibe la evaluación como el proceso sistemático de recogida de información rigurosa -valiosa, válida y fiable-, orientado a valorar la calidad y los logros de un programa, como base para la posterior toma de decisiones de mejora tanto del programa como del personal implicado. El objetivo de la evaluación de los logros de un programa es comprobar la eficacia del mismo, ya sea en

sentido absoluto o relativo, de cara a mantenerlo, mejorarlo, cambiarlo o suprimirlo. La metodología a

utilizar es diversa e incluye todos los diseños y técnicas clásicos utilizados en la investigación educativa: el

evaluador deberá seleccionar aquellos más pertinentes al enfoque evaluativo, a los objetivos pretendidos

y a las exigencias propias de los modelos estadísticos. 21. LAS NORMAS DE UTILIDAD DE JOINT COMITÉ PARA LA EVALUACIÓN DE PROGRAMAS. La utilización de las normas del Joint Comite on standards for evaluación cumplen la función de la meta-evaluación para asegurar que la evaluación ha sido viable, útil y realizada de manera honrada y precisa. - Normas de utilidad: Para asegurar que sirve a las necesidades de información práctica, centrada en cuestiones importantes. Los estándares de utilidad guiarán la evaluación de tal forma que sean relevantes, oportunos y de influencia. Deben facilitar informes basados en evidencias, sobre aspectos positivos y negativos y debe aportar soluciones para mejorar. 22. APORTACIONES DE CRONBACH A LA EVALUACIÓN DE PROGRAMAS. Cronbach necesitaba describir, a su modo, la validez interna y la externa; para ello inventa un grupo de símbolos. Utiliza en letras minúsculas la expresión utos, refiriéndose a los datos reales recogidos en términos de unidades o personas, tratamientos, observaciones y situaciones; los UTOS (con letras mayúsculas) se refieren a poblaciones de unidades, tratamientos, observaciones y situaciones sobre las cuales fueron formuladas las cuestiones de la investigación y a las cuales los utos particulares se suponen que corresponden. Los UTOS se refieren a las poblaciones de personas, tratamientos, observaciones y situaciones que manifiestamente son diferentes de aquellas de las que se han obtenido las muestras correspondientes de utos. Las poblaciones en cualquier estudio no son homogéneas. Los UTOS son el dominio más relevante para la aplicación de la investigación social debido a que tiene que ver con la transferencia de los hallazgos investigativos más allá de los contextos en los que se generan. Las extrapolaciones múltiples son útiles pero ninguna más importante que aquellas que puedan hacerse para los UTOS por su potencial interés para los patrocinadores en el presente y en el futuro. Para Cronbach la validez es una propiedad de las conclusiones; para él tiene poco sentido hablar de validez de los métodos o de los estudios. La validez es subjetiva. La validez interna de Cronbach se interesa por las inferencias de los utos muestrales a los UTOS poblacionales para intentar lograr la generalización. De acuerdo con Cronbach, muchos patrocinadores de programas valoran un segmento particular del espacio dentro de los UTOS que refleja sus necesidades de información particulares. Para maximizar la utilidad de tal heterogeneidad de necesidades se requiere un conocimiento que trascienda cualquier grupo limitado de personas, tratamientos, situaciones o resultados; encontrar tales necesidades es el mayor propósito de la evaluación, luego la extrapolación del conocimiento de la validez externa de los UTOS a los UTOS toma su precedente del conocimiento de la validez interna.

El punto de partida de Cronbach es el muestreo de unidades o personas, tratamientos, observaciones situaciones estudiadas. Su validez externa se interesa porque los objetivos puedan ser generalizados. La validez externa es importante porque los patrocinadores individuales a menudo quieren aplicar el conocimiento existente a personas, situaciones, tratamientos y observaciones de las que ellos son responsables. Raramente todas estas particularidades están contenidas en la base del conocimiento existente por lo que los usuarios deben extrapolar la información más allá de los datos disponibles. Tal extrapolación es difícil y no ha sido objetivo central de ninguna teoría de diseños de investigación e interpretación reconocida. 23. EL MODELO DE EVALUACIÓN DE PROGRAMAS DE PÉREZ JUSTE.

Para Pérez Juste la evaluación de programas es una actividad pedagógica orientada a la mejora de los programas, del educando y del educador, de una manera directa, e indirectamente también actúa en la mejora de variables organizativas y técnicas y medioambientales, sobre los programas mismos. Por programa educativo entiende un plan sistemático de intervención, específica e intencionalmente elaborado, al servicio de metas consideradas valiosas desde una perspectiva pedagógica. Los programas educativos vienen definidos por las notas siguientes: Complejidad. Dificultad. Duración. Procesualidad. Mantenimiento y transferencia.. 24. EL CONCEPTO DE MEJORA CONTINUA EN LA EVALUACIÓN DE PROGRAMAS.

La mejora continua intenta optimizar y aumentar la calidad de un producto, proceso o servicio

La Mejora Continua tienes las siguientes características:

1. Un proceso documentado. Esto permite que todas las personas que son partícipes de dicho

proceso lo conozcan y todos lo apliquen de la misma manera cada vez 2. Algún tipo de sistema de medición que permita determinar si los resultados esperados de cierto proceso se están logrando (indicadores de gestión) 3. Participación de todas o algunas personas relacionadas directamente con el proceso ya que son

estas personas las que día a día tienen que lidiar con las virtudes y defectos del mismo.

Viéndolo desde este punto de vista, una de las principales ventajas de tener un sistema establecido de

Mejora Continua es que todas las personas que participan en el proceso tienen capacidad de opinar y

proponer mejoras lo que hace que se identifiquen más con su trabajo y además se tiene la garantía que la

fuente de información es de primera mano ya que quien plantea el problema y propone la mejora conoce el proceso y lo realiza todos los días.

25. EL CONTEXTO EN LA EVALUACIÓN DE PROGRAMAS. Los principales objetivos de este tipo de estudios son la valoración del estado global del objeto, proyecto, programa, personal, instituciones y/o sis-temas educativos a evaluar, para la identificación de sus deficiencias, la identificación de sus virtudes en las que se pueden apoyar para subsanar las deficiencias, el diagnóstico de los problemas cuya solución puede mejorar el estado del objeto y, en general, la caracterización del marco en el que. se desarrolla el programa a evaluar. Y también, y no menos importante, si las nietas y prioridades existentes, que afirma perseguir lograr el programa, están en consonancia con las necesidades que deben satisfacer. La evaluación de contexto debe proporcionar una base sólida para el ajuste de nietas y prioridades y para la indicación de los cambios necesarios que debe conseguir el programa, y que deben reflejarse en esta primera parte de la evaluación. Su metodología es la característica de la investigación tipo encuesta, y utiliza los siguientes instrumentos tales como las entrevistas, reuniones, lecturas de informes, etc., para la recogida de, información, destinada a generar hipótesis acerca de los programas de intervención, para generar los cambios necesarios para la solución de las necesidades detectadas a las que debe servir. 26. EL MODELO CIPP DE EVALUACIÓN DE PROGRAMAS. consiste en lo siguiente:

1 La evaluación del contexto, para servir a la toma de decisiones de planificación, que, tras el

análisis de las necesidades del contexto, deberá determinar las necesidades de elaboración, o selección,

de un programa educativo, con una clara definición de sus propósitos o de sus objetivos, para atender a

las necesidades detectadas. 2. La evaluación de entrada, al servicio de las decisiones de organización,

estructurales, que nos indican los recursos disponibles, y los que serían ne cesa rios , las

diferentes es tra tegas al terna tivas para mejorar la aplicación del programa, y los planes que

aportan un mayor potencial p a ra d is eñ a r l a pl an if i c ac ión qu e ori en te c óm o d eb e s e r

a pl ic ad o el programa.

3. La evaluación de proceso, al servicio de las decisiones de implementación qu e n os i nform ará

s ob re c óm o s e e s tá re al i za nd o el p la n p rev is to y las revisiones necesarias para mejorar la

aplicación del programa.

4. La evaluación de producto, al servicio de las decisiones de reciclaje, que nos aportará

información sobre los resultad os obtenidos,informando acerca de cómo han sido

reducidas las necesidades, enintensidad, adecuación, y calidad, y, de acuerdo con los

resultados, or i e n ta r á s ob re q u é s e d e b e h a c e r c on e l p r ogr a m a d e s p u é s d e s u

aplicación.

27. LOS ESTÁNDARES EN LA EVALUACIÓN DE PROGRAMAS. - Normas de utilidad: Para asegurar que sirve a las necesidades de información práctica, centrada en cuestiones importantes. Los estándares de utilidad guiarán la evaluación de tal forma que sean relevantes, oportunos y de influencia. Deben facilitar informes basados en evidencias, sobre aspectos positivos y negativos y debe aportar soluciones para mejorar. - Normas de viabilidad: Para asegurar que la evaluación es realista y prudente. Debe utilizar procedimientos eficientes que no ocasionen demasiados problemas. Los estándares de viabilidad reconocen que

las evaluaciones se realizan en contextos naturales, sus diseños deben ser operativos y sus gastos, en material, personal o tiempo, no deben exceder al requerido por las cuestiones de la evaluación. - Normas de honradez: Para asegurar que la evaluación es conducida legal y éticamente, basada en compromisos explícitos, que aseguren la necesaria cooperación, la protección de los grupos implicados, y la honestidad de los resultados. - Normas de precisión: Para asegurar que la evaluación revela comunica la información encontrada; describe con claridad el objeto evaluado en su evolución y en su contexto; revela las virtudes y defectos de/ plan de evaluación, de los procedimientos y de las conclusiones (nieta-evaluación) y proporciona conclusiones válidas y fidedignas. Las conclusiones y los juicios deben ser coherentes con los datos. 28. LA EVALUACIÓN DE PROGRAMAS SEGÚN SCRIVEN, STAKE Y PÉREZ JUSTE. SEMEJANZAS Y DIFERENCIAS. Para Scriven la evaluación consiste en determinar el valor y la calidad de algo y las evaluaciones son los resultados de dicho proceso. Ello implica determinar:

- los criterios de su mérito, desde las necesidades de mejora concretadas en las metas que pretende el programa - las normas de mérito, o los indicadores que reflejan las metas, que nos van a permitir comprobar la realización

Pérez Juste concibe la evaluación como el proceso sistemático de recogida de información rigurosa -valiosa, válida y fiable-, orientado a valorar la calidad y los logros de un programa, como base para la posterior toma de decisiones de mejora tanto del programa como del personal implicado. Enfatiza el modo de realizar la evaluación como investigación, sin olvidar que el objetivo de la evaluación es el de valorar el programa.

Stake ve la evaluación como servicio: La gente espera de la evaluación diferentes propósitos tales corno la

documentación de los acontecimientos, el registro de los cambios, la ayuda a la toma de decisiones, la

comprensión o la facilitación de soluciones.

Como en la evaluación libre de metas de Scriven, Stake destaca que se permita que la evaluación emerja a

partir de la observación del programa, y está más inclinado a que sirva a las personas particulares que

participan en el programa que a sus patrocinadores o directores. Ve la evaluación más como un servicio que

como un análisis crítico. Stake dice que difiere de Scriven en ver la evaluación para descubrir sucesos más allá

de la práctica corriente: señala el papel del evaluador corno facilitador más que como descubridor o

investigador.

29. FUNCIONES DE LA EVALUACIÓN.

La evaluación de los aprendizajes escolares se refiere al proceso sistemático y continuo mediante el cual se determina el grado en que se están logrando los objetivos de aprendizaje. Dicho proceso tiene una función primordial dentro del proceso de enseñanza-aprendizaje, pues por medio de ella se retroalimenta dicho proceso. Si como resultado de la evaluación descubrimos que los objetivos se están alcanzando en un grado mucho menor que el esperado o que no se están alcanzando, inmediatamente surgirá una revisión de los planes, de las actividades que se están realizando, de la actitud del maestro, de la actitud de los alumnos y de la oportunidad de los objetivos que se están pretendiendo. Todo este movimiento traerá como resultado un reajuste, una adecuación que fortalecerá el proceso enseñanza-aprendizaje que se viene realizando; es así como la evaluación desempeña su función retroalimentadora. Evaluar, en otras palabras, es reunir todas las evidencias posibles que en forma objetiva podamos encontrar a favor o en contra de cada una de las actividades que se están desarrollando dentro del proceso enseñanza-aprendizaje. La evaluación es un proceso que implica descripciones cuantitativas y cualitativas de la conducta del alumno, la interpretación de dichas descripciones y por último la formulación de juicios de valor basados en la interpretación de las descripciones. Refiriéndonos a la evaluación como proceso para determinar el grado en que los objetivos del aprendizaje van siendo alcanzados, distinguiremos tres tipos de ella:

a. Evaluación diagnóstica b. Evaluación formativa c. Evaluación sumaria

30. LA EVITACIÓN DE LOS PREJUICIOS EN LA EVALUACIÓN DE ACUERDO CON SCRIVEN. La evitación de prejuicios Quiere minimizar la mayoría de los prejuicios que se dan cuando se construyen las afirmaciones de valor. No deben ser evitados, sino que se deben hacer explícios. Por ejemplo: evaluadores que consideran mási mportantes los intereses de los organizadores que otros como los de los propios usuarios o beneficiarios del programa. Una de las soluciones es llegar a acuerdos de modo que se garantice la independencia del evaluador. El evaluador debe hacer evidentes tanto las metas explícitas como las implícitas de los programas. Las que el programa dice que pretende conseguir y en las que realmente se centra el programa en la práctica y las que logra. El trabajo del evaluador es identificar cualquier efecto del programa, pretendido no, esto es que realicen evaluaciones libres de metas, también llamadas evaluaciones con referencia a las necesidades

31. FASES DE LA EVALUACIÓN DE PROGRAMAS. Dado que los evaluadores deben informar a todos los grupos interesados en saber, el informe no debe limitarse a un único estilo de comunicación. La información evaluativa debe aportar conocimiento, enseñanza, sobre las concepciones de los problemas sociales y sobre la teoría implícita ele los programas. Por eso, los informes de evaluación deben mostrar: .Las cuestiones que han aconsejado la evaluación. .Los procesos seguidos para realizar la evaluación. .Las fuentes de donde toman sus datos en los diferentes momentos de la evaluación. .Los métodos, técnicas e instrumentos utilizados, de acuerdo con el objetivo y la dimensión a evaluar. .Los criterios con los que se comparan los programas, su funcionamiento y sus resultados. .Los criterios en los que se basa que le llevan a emitir los juicios valorativos sobre el programa, su implementación y sus logros. .Las recomendaciones que se derivan de la evaluación. .El plan para incorporar las recomendaciones al programa, e indicaciones para el seguimiento de su puesta en práctica. Tras el proceso de comparación entre los criterios, las normas, y el fun-cionamiento real, se deben integrar los resultados en un juicio de valor final, que sirva de retroalimentación para la mejora del programa, de su funcionamiento y de las personas implicadas en él.

32. DEFINICIÓN DE PROGRAMA EDUCATIVO. Por programa educativo entiende un plan sistemático de intervención, específica e intencionalmente elaborado, al servicio de metas consideradas valiosas desde una perspectiva pedagógica. Los programas educativos vienen definidos por las notas siguientes: Complejidad. Dificultad. Duración.. Procesualidad. Mantenimiento y transferencia. 33. FINES DE LA EVALUACIÓN DE PROGRAMAS. A veces los términos evaluación y diagnóstico se utilizan indistintamente, siendo los adjetivos que los acompañen los que nos informen si se trata de la evaluación de necesidades de mejora de un sujeto o el diagnóstico de la problemática de un centro educativo. El diagnóstico utiliza técnicas evaluativos para identificar, describir, clasificar, predecir y explicar las características de un sujeto o grupo de sujetos. Tanto el diagnóstico como la evaluación utilizan la medida. Ambos realizan una estimación, pero el diagnóstico tiene como finalidad la comprensión y clasificación de los factores que expliquen una dificultad o problema e indicar e tratamiento más adecuado para resolver la dificultad. La finalidad de la evaluación es también conocer la realidad para informar, comprender y orientar la toma de decisiones de cambio y mejora, orientar para elaborar programas y adoptar medidas que conduzcan a la realización de acciones para el cambio y mejora.

34. PROCEDIMIENTOS QUE SE SIGUE PARA LA EVALUACIÓN DE PROGRAMAS EDUCATIVOS. El modelo lógico para la elaboración y la evaluación de los programas, fundamentado en los trabajos de Scriven, ofrece un marco teórico y de organización para el desarrollo y comprensión de los programas y de sus objetivos, de su planificación y de su realización y de su evaluación para la comprobación de sus resultados y logros. La elaboración, planificación y desarrollo de los programas, conducen a la consecución de unos resultados, dependientes de la gestión del programa y de los recursos para su adecuada aplicación, y todo ello forma parte del proceso de evaluación de un programa. En el lado de lo planeado se debe incluir una descripción de todo lo necesario para conseguir los resultados pretendidos, es decir: 1) El propio programa. 2) Los recursos de personal, de organización, de financiación y los

recursos de la comunidad en la que se va a aplicar el programa. 3) Los procesos, como conjunto de estrategias planificadas para la

acción. En el lado de los resultados se incluyo todo lo que el programa pretenle conseguir, y nos referimos a: 4) Los resultados directos de las actividades del programa . 5) Las metas específicas conseguidas en el corto plazo, y su grado de

consecución. 6) El impacto o metas a largo plazo, a través de los cambios

conseguidos. Sí los objetivos del programa son realistas y plausibles de conseguir, entonces se conseguirán. Si se cuenta con los recursos necesarios para la aplicación de programa, entonces será más factible que se aplique del modo adecuado para que contribuya a conseguir los objetivos

pretendidos. Si los procesos se realizan de modo que alcance los objetivos que se pretenden desarrollar en tecla su extensión, entonces dichos objetivos se conseguirán. 35. LA EVALUACIÓN DE PROGRAMAS SEGÚN CRONBACH, SCRIVEN Y STUFFLEBEAM. SEMEJANZAS Y DIFERENCIAS. Stufflebeam define la evaluación como un proceso mediante el cual se proporciona información útil para la toma de decisiones. Así pues, la evaluación consiste en un proceso con 3 etapas: identificar, obtener y proporcionar información acerca de un progrma valorado en sus metas, su planificación, su realización y su impacto, con la finalidad de guiar la toma de decisiones, proporcionar información y contribuir a su comprensión, y con el criterio de responder a las necesidades y de calidad. Cronbach considera que la evaluación educativa debe ayudar a los profesores a mejorar los resultados de sus programas desde el comienzo de su aplicación, y no al final, una vez que toda actividad educativa se ha desarrollado. Defiende que la evaluación debe contribuir a mejorar la educación más en el momento de su planificación y desarrollo que cuando el programa se ha realizado y únicamente se evalúa para constatar sus resultados, positivos y/o negativos. Cronbach rechaza claramente la naturaleza de la evaluación, pretendiendo que sea un estudio neutro. Concibe al evaluador como un educador cuyos informes van a ser juzgados para que otros aprendan, más que como un árbitro que es contratado para decidir quién está en lo correcto y quién equivocado. Para Scriven la evaluación consiste en determinar el valor y la calidad de algo y las evaluaciones son los resultados de dicho proceso. Ello implica determinar:

- los criterios de su mérito, desde las necesidades de mejora concretadas en las metas que pretende el programa - las normas de mérito, o los indicadores que reflejan las metas, que nos van a permitir comprobar la realización

La comparación entre lo deseable, lo posible y lo conseguido nos permitirá obtener los resultados, y así realizar el juicio evaluativo, procurando siempre que el resultado de la evaluación sea comprendido por quien se quiera que reciba esa información: el director de un centro, la asociación de padres, los profesores, los alumnos, …

36. EL CONCEPTO DE EVALUABILIDAD Y EL CONCEPTO DE METAEVALUACIÓN. FINALIDAD Y MOMENTOS EN LOS QUE SE APLICA EN LA EVALUACIÓN DE UN PROGRAMA. La Evaluabilidad del programa se refiere a las posibilidades que el programa contiene para facilitarla información necesaria para decidir sobre su eficacia e incluso identificar los posibles elementos de mejora. Ello supone que el programa debe cumplir ciertas condiciones de calidad, tanto en lo referido a 1) la claridad y precisión del lenguaje que utilice 2) a su contenido, explicitando el marco teórico de referencia, las necesidades a satisfacer, los indicadores de progreso 3) su metodología, referida a la especificación de las evidencias para decidir sobre su calidad, a la operativización de las variables en que se concretan las metas y objetivos, en la provisión de los instrumentos adecuados para la recogida de datos, con indicación de sus características técnicas y la previsión del tratamiento y análisis de los datas recogidos. La metaevaluación, es decir, la evaluación de la evaluación para identificar sus fortalezas, sus limitaciones y otros usos. La meta -evaluación debe ser hecha siempre por el evaluador, de un modo tan amplio como sea posible, corno de control de calidad, una vez finalizada la evaluación, pero no sólo, dado que se puede hacer dm-ante la evaluación. Y, siempre que sea posible, también debe ser realizada por tur evaluador externo de la evaluación (un meta evaluador). El criterio fundamental de mérito de las evaluaciones es la validez, junto con la utilidad, y la credibilidad. 37. LA LÓGICA DE LA EVALUACIÓN Y LA PRÁCTICA EVALUATIVA EN LA CONCEPCIÓN DE SCRIVEN.

Los límites de la evaluación como disciplina son definidos, por la mayoría de los teóricos de la evaluación, en términos que la consideran un área de evaluación aplicada, como es la evaluación de programas. Si embargo, Scriven defiende que la evaluación debe ser considerada desde una concepción más amplia de la que forma parte la evaluación de programas. La evaluación de programas utiliza métodos y técnicas de investigación que proceden de las Ciencias Sociales, y de otras disciplinas como el Derecho, la Lógica, la Ética, así como del propio desarrollo de la Teoría Evaluativa. El proceso de evaluación no es simple. La evaluación no es sólo una mera acumulación y síntesis de datos relevantes para la toma de decisiones. Digamos que éste es uno de los componentes de la evaluación y uno de sus propósitos. El otro componente, y previo al anterior, es el de os criterios evaluativos que verifican los valores relevantes y las normas elegidas para la realización de la evaluación. (Scriven). El primer paso para que la evolución se constituya en una disciplina científica va más allá de la simple práctica evaluativa elaborando guías que orienten dicha práctica. Comienza identificando normas que gobiernen, prescriban, las evaluaciones. Este paso se encuentra desarrollado en la actualidad, en e subcampo de la evaluación de programas. 38. EL MODELO DE EVALUACIÓN RESPONDIENTE A STAKE.

Stake sugería un modo para ayudar al evaluador a saber qué datos reunir, no sólo en relación con las metas pretendidas y a sus resultados, como enfatizaba el modelo de Tyler, sino también en relación con los procesos, los antecedentes e incluso a los juicios. Para ello la evaluación fue caracterizada por una serie de matrices comprensivas para la recogida de datos, una matriz para explicar la racionalidad del programa, otra con seis celdas para datos descriptivos, y otra con otras seis celdas para datos de valoración o juicio. Las dos funciones básicas de la evaluación, en el modelo de la figura, son la descripción y la valoración o juicio. Utilizando el marco comprensivo del enfoque de evaluación de la figura, el evaluado debe: 1. Proporcionar información justificativa de los huir/amemos del programa y descubrir la base racional del mismo, incluyendo sus necesidades. 2. Después debe mencionar las intenciones de entrada,

antecedentes, reclusos, y condiciones existentes, las transacciones, referidas a los procesos y a las actividades, y los resultados.

3. Recoger información, a través de la observación, sobre los antecedentes, las transacciones y los resultados, tanto los pretendidos como los no pretendidos, de las tres categorías.

4. Explicitar las normas, criterios, expectativas, rendimientos, para valorar los antecedentes, transacciones y resultados del programa y recoger los juicios hechos por la gente que participa en el programa sobre las condiciones de partida (antecedentes), las transacciones y los resultados.

5. El evaluador, finalmente, debe analizar la información de la matriz descriptiva atendiendo a la congruencia entre lo pretendido y lo

observado y teniendo en cuenta las relaciones dependientes de los resultados y las transacciones de los antecedentes. Los juicios se harán mediante la aplicación de las normas a los datos descriptivos.

39. TEORÍA FUNCIONAL PARA EL DISEÑO DE EVALUACIONES DE PROGRAMAS EDUCATIVOS Y SOCIALES. Para Cronbach la evaluación deber ser plural tanto en sus elementos como en los temas con los que trabaje. También está convencido de la posibilidad de generar conocimiento que permita extrapolarse a personas, situaciones, tratamientos y observaciones estudiadas para relacionarlas con poblaciones y clases no estudiadas. Cronbach trata de resolver la limitación existente de los diseños de investigación, los cuales se interesan más por la validez interna que por la externa. Llamó a su teoría “funcional”. Cronbach aplica su teoría en planes para futuros programas que están siendo puestos en funcionamiento con la intención de imitar las condiciones de su futura implantación. En su libro de 1980 este era uno de los 4 contextos donde la evaluación cumplía su función. Los contextos eran: - iniciación del programa - superrealización del programa - prototípico - aplicación real del programa, cuando se pone en funcionamiento de un modo normal Cronbach no considera importante este último estadio, el de aplicación real del programa, ya que es inmune a una evaluación seria; difícilmente se consideran los resultados de una evaluación cuando un programa está ya funcionando, es mucho más eficaz en el período prototípico, que equivaldría a la aplicación piloto del programa, donde las condiciones de aplicación deben ser lo más idénticas a la realidad. Pero Cronbach reconoce que las evaluaciones de programas en funcionamiento pueden contribuir a mejorar elementos que trabajan mal y, de esa manera, repercutir positivamente en la totalidad del programa y en todas las situaciones y ámbitos en los que se aplica. 40. EL MODELO DE LA FIGURA DE STAKE. Stake sugería un modo para ayudar al evaluador a saber qué datos reunir, no sólo en relación con las metas pretendidas y a sus resultados, como enfatizaba el modelo de Tyler, sino también en relación con los procesos, los antecedentes e incluso a los juicios. Para ello la evaluación fue caracterizada por una serie de matrices comprensivas para la recogida de datos, una matriz para explicar la racionalidad del programa, otra con seis celdas para datos descriptivos, y otra con otras seis celdas para datos de valoración o juicio. Las dos funciones básicas de la evaluación, en el modelo de la figura, son la descripción y la valoración o juicio. Utilizando el marco comprensivo del enfoque de evaluación de la figura, el evaluado debe: 1. Proporcionar información justificativa de los huir/amemos del programa y descubrir la base racional del mismo, incluyendo sus necesidades. 2. Después debe mencionar las intenciones de entrada, antecedentes, reclusos, y condiciones existentes, las transacciones, referidas a los procesos y a las actividades, y los resultados.

3. Recoger información, a través de la observación, sobre los antecedentes, las transacciones y los resultados, tanto los pretendidos como los no pretendidos, de las tres categorías. 4. Explicitar las normas, criterios, expectativas, rendimientos, para valorar los antecedentes, transacciones y resultados del programa y recoger los juicios hechos por la gente que participa en el programa sobre las condiciones de partida (antecedentes), las transacciones y los resultados. 5. El evaluador, finalmente, debe analizar la información de la matriz descriptiva atendiendo a la congruencia entre lo pretendido y lo observado y teniendo en cuenta las relaciones dependientes de los resultados y las transacciones de los antecedentes. Los juicios se harán mediante la aplicación de las normas a los datos descriptivos. 41. EL MODELO RESPONDIENTE DE STAKE. La característica esencial del enfoque es la sensibilidad hacia los temas esenciales, especialmente hacia aquellos que ayudan a las personas en sus lugares de trabajo. Requiere una dilatada y continua adaptación de los objetivos de la evaluación al entorno en el que actúa y una reunión de datos para que los responsables de la realización de la evaluación se pongan al corriente del programa y del contexto de la evaluación. Las evaluaciones respondientes se caracterizan por el uso de la observación y la flexibilidad. Stake menciona doce actuaciones a realizar en las evaluaciones respondientes: 1. Hablar con los clientes, el personal del programa y las audiencias o beneficiarios de los programas. 2. Identificar la extensión y el alcance del programa. 3. Revisar las actividades del programa. 4. Descubrir los propósitos y preocupaciones del personal y los grupos interesados o audiencias. 5. Conceptualizar los temas. 6. Identificar las necesidades de. datos y temas. 7. Seleccionar los observadores, los jueces; y los instrumentos si fueran necesarios. 8. Observar los antecedentes, las transacciones y los resultados. 9. Tematizar , categorizar, preparar descripciones, estudios de caso. 10. Validar, confirmar, tratar de desconfirmar. 11. Presentar los resultados a las audiencias. 12. Adaptar para el uso de los diferentes grupos interesados o audiencias. El evaluador respondiente debe «prestar una cuidadosa atención a las razones por las que se pide la 'evaluación, después prestar atención a lo que está ocurriendo en el programa y elegir las cuestiones y criterios de valor. No debería utilizar una lista de objetivos o elegir instrumentos para reunir los datos previos desviando su atención de las cosas que más interesan a la gente implicada en el programa y no debería fracasar en descubrir lo mejor y peor del programa». 42. ELABORE UNA DEFINICIÓN DE EVALUACIÓN DE PROGRAMAS. La evaluación de programas es un proceso que consiste en valorar si un

programa consiguió o no en alcanzar los objetivos para cuya consecución fue ideado.

Es la determinación de la medida en que un programa logró uno o más de sus objetivos, las razones por las cuales no los alcanzó y la relación existente entre los efectos del programa y una amplia diversidad de variables y características

del programa 43. EXPLIQUE LAS CONCEPCIONES DE CRONBACH SOBRE LA VALIDEZ INTERNA Y EXTERNA DE LOS DISEÑOS EVALUATIVOS. Cronbach necesitaba describir, a su modo, la validez interna y la externa; para ello inventa un grupo de símbolos. Utiliza en letras minúsculas la expresión utos, refiriéndose a los datos reales recogidos en términos de unidades o personas, tratamientos, observaciones y situaciones; los UTOS (con letras mayúsculas) se refieren a poblaciones de unidades, tratamientos, observaciones y situaciones sobre las cuales fueron formuladas las cuestiones de la investigación y a las cuales los utos particulares se suponen que corresponden. Los UTOS se refieren a las poblaciones de personas, tratamientos, observaciones y situaciones que manifiestamente son diferentes de aquellas de las que se han obtenido las muestras correspondientes de utos. Las poblaciones en cualquier estudio no son homogéneas. Los UTOS son el dominio más relevante para la aplicación de la investigación social debido a que tiene que ver con la transferencia de los hallazgos investigativos más allá de los contextos en los que se generan. Las extrapolaciones múltiples son útiles pero ninguna más importante que aquellas que puedan hacerse para los UTOS por su potencial interés para los patrocinadores en el presente y en el futuro. Para Cronbach la validez es una propiedad de las conclusiones; para él tiene poco sentido hablar de validez de los métodos o de los estudios. La validez es subjetiva. La validez interna de Cronbach se interesa por las inferencias de los utos muestrales a los UTOS poblacionales para intentar lograr la generalización. De acuerdo con Cronbach, muchos patrocinadores de programas valoran un segmento particular del espacio dentro de los UTOS que refleja sus necesidades de información particulares. Para maximizar la utilidad de tal heterogeneidad de necesidades se requiere un conocimiento que trascienda cualquier grupo limitado de personas, tratamientos, situaciones o resultados; encontrar tales necesidades es el mayor propósito de la evaluación, luego la extrapolación del conocimiento de la validez externa de los UTOS a los UTOS toma su precedente del conocimiento de la validez interna. El punto de partida de Cronbach es el muestreo de unidades o personas, tratamientos, observaciones situaciones estudiadas. Su validez externa se interesa porque los objetivos puedan ser generalizados. La validez externa es importante porque los patrocinadores individuales a menudo quieren aplicar el conocimiento existente a personas, situaciones, tratamientos y observaciones de las que ellos son responsables. Raramente todas estas particularidades están contenidas en la base del conocimiento existente por lo que los usuarios deben extrapolar la información más allá de los datos disponibles. Tal extrapolación es difícil y no ha sido objetivo central de ninguna teoría de diseños de investigación e interpretación reconocida. 44. CONCEPTOS RELACIONADOS CON LA EVALUACIÓN DE PROGRAMAS. DEFINALOS Y MENCIONE LOS PUNTOS COMUNES Y DIFERENCIALES CON EL CONCEPTO DE EVALUACIÓN DE PROGRAMAS. - Conceptos relacionados con el de evaluación de programas

evaluación y medida evaluación del estudiante y evaluación de programas evaluación de programas y diagnóstico investigación y evaluación de programas

Hay 4 actividades importantes relacionadas con la evaluación:

- Medida - Evaluación del aprendizaje - Diagnóstico - Investigación

En la lengua castellana el término evaluación se ha referido a la evaluación del rendimiento de los estudiantes, pero debido al creciente desarrollo del este concepto aplicado a los programas, los currículos, al personal, etc., es necesario especificar el ámbito de la evaluación. 45.COMENTE LOS CUATRO PASOS DE LA LÓGICA DE SCRIVEN PARA REALIZAR LA EVALUACIÓN DE UN PROGRAMA.

PASOS DE LA LÓGICA DE LA EVALUACIÓN: SEGÚN SCRIVEN. 1. Seleccionar, definir, identificar, concretar los criterios de calidad del programa. Para

ello se usan los criterios de: funcionalidad, eficacia y eficiencia. 2. Elaborar normas de actuación. 3. Recoger información. 4. Integrar los resultados, para la mejora del programa.

46.MODO DE POTENCIAR EL USO DE LOS RESULTADOS DE LA EVALUACIÓN.

Los resultados tienen como fin contribuir a la toma de decisiones de cambio y mejora de los programas. sólo repercutirá si es una información convincente, coherente, adecuada y oportuna. Variables que afectan al uso de los resultados:

1. Pertinencia 2. Comunicación entre los evaluadores y los implicados. 3. Proceso de información de los implicados. 4. Factibilidad de los resultados 5. Participación y los implicados

Los resultados tienen 3 tipos de repercusiones: conceptual, persuasiva e instrumental. El uso de los resultados requiere difusión que es responsabilidad de los investigadores evaluativos. 47. CONCEPTO DE METAEVALUACIÓN, Y CARACTERISTICAS DE SU APLICACIÓN A LA EVALUACIÓN DE PROGRAMAS.

Es decir, la evaluación de la evaluación para identificar sus fortalezas, sus limitaciones y otros usos. La meta-evaluación debe ser hecha siempre por el evaluador, de un modo tan amplio como sea posible, corno de control de calidad, una vez finalizada la evaluación, pero no sólo, dado que se puede hacer delante la evaluación. Y, siempre que sea posible, también debe ser realizada por tur evaluador externo de la evaluación (un meta evaluador). El criterio fundamental de mérito de las evaluaciones es la validez, junto con la utilidad, —normalmente para los clientes, las audiencias y los promotores—, y la credibilidad. 48. COMENTE LOS CUATRO GRUPOS DE NORMAS POR LAS QUE DEBEN SER JUZGADAS LAS EVALUACIONES.

Incluimos una síntesis de las normas del Joint Committee on standards for evaluación, por las que deben ser juzgadas las evaluaciones: - Normas de utilidad: Para asegurar que sirve a las necesidades de información práctica, centrada en cuestiones importantes. Los estándares de utilidad guiarán la evaluación de tal forma que sean relevantes, oportunos y de influencia. Deben facilitar informes basados en evidencias, sobre aspectos positivos y negativos y debe aportar soluciones para mejorar. - Normas de viabilidad: Para asegurar que la evaluación es realista y prudente. Debe utilizar procedimientos eficientes que no ocasionen demasiados problemas. Los estándares de viabilidad reconocen que las evaluaciones se realizan en contextos naturales, sus diseños deben ser operativos y sus gastos, en material, personal o tiempo, no deben exceder al requerido por las cuestiones de la evaluación. - Normas de honradez: Para asegurar que la evaluación es conducida legal y éticamente, basada en compromisos explícitos, que aseguren la necesaria cooperación, la protección de los grupos implicados, y la honestidad de los resultados. - Normas de precisión: Para asegurar que la evaluación revela comunica lainformación encontrada; describe con claridad el objeto evaluado en su evolución yen su contexto; revela las virtudes y defectos de/ plan de evaluación, de losprocedimientos y de las conclusiones (nieta-evaluación) y proporciona conclusiones válidas y fidedignas. Las conclusiones y los juicios deben ser cohe-rentes con los datos, 49. LA GENERALIZACIÓN DE LOS RESULTADOS SEGÚN CRONBACH. Para Cronbach la validez es una propiedad de las conclusiones; para él tiene poco sentido hablar de validez de los métodos o de los estudios. La validez es subjetiva. La validez interna de Cronbach se interesa por las inferencias de los utos muestrales a los UTOS poblacionales para intentar lograr la generalización. De acuerdo con Cronbach, muchos patrocinadores de programas valoran un segmento particular del espacio dentro de los UTOS que refleja sus necesidades de información particulares. Para maximizar la utilidad de tal heterogeneidad de necesidades se requiere un conocimiento que trascienda cualquier grupo limitado de personas, tratamientos, situaciones o resultados; encontrar tales necesidades es el mayor propósito de la evaluación, luego la extrapolación del conocimiento de la validez externa de los UTOS a los UTOS toma su precedente del conocimiento de la validez interna. 50. EL CONCEPTO DE EVALUACIÓN DE PROGRAMAS DE TYLER. Era Ralph Tyler el que dirigía el Departamento de evaluación educativa de este estudio y conceptualizó el enfoque de evaluación educativa basado en los objetivos, desarrollando instrumentos y procedimientos para medir un amplio rango de objetivos educativos. El trabajo de Tyler ha supuesto una gran influencia en diversas áreas de investigación y en la práctica educativa, incluyendo la evaluación educativa.

Los hallazgos de este estudio fueron ensombrecidos por la II Guerra Mundial, pero la concepción de Tyler del currículum, la medida y la evaluación ha tenido una gran influencia en las décadas siguientes. Tyler, el cual es considerado como el fundador de la evaluación aplicada a los programas educativos, concebía la evaluación como “el proceso para determinar en qué medida los objetivos educativos han sido realizados”.