Gestión y evaluación de aprendizajes y proyectos EaDcampus.fundec.org.ar/admin/archivos/modulo...

Teoría y Enfoques de la Educación a Distancia - 2013

fundec ISBN: 987 -‐ 9225 -‐ 12 -‐ 0 – Hecho el depósito que marca la Ley 11.723 El editor se reserva todos los derechos sobre esta obra, la que no puede reproducirse total o parcialmente por ningún método gráfico, electrónico o mecánico, incluyendo los de fotocopiado, registro magnético o de almacenamiento de datos, sin su consentimiento.

1

Módulo 5: Gestión y evaluación

de aprendizajes y proyectos EaD Jorge E.Grau

Estela N. Muelas “El esfuerzo dedicado a una decisión

es inversamente proporcional a su importancia”.

Corolario 123 de la Ley de Murphy

Todo profesional que tiene que liderar procesos de renovación deberá conocer y resolver la gama de actitudes renuentes a su implementación. Si bien en todos los adultos se dan inclinaciones y resistencias al cambio, estas actitudes y comportamientos varían notablemente de un caso a otro. Factores culturales, sociales y psicológicos, vinculados a los sistemas de valores vigentes, a las relaciones intergrupales, a problemas de categoría y función, etcétera, y sobre todo los vinculados a procesos de comunicación deficientes, son los que determinarán el grado de barreras o estímulos frente a la propuesta, y el fracaso o el éxito de nuestra tarea de capacitación.

Por otro lado, la manera de organizar el cómo enseñar no siempre es un concepto nítido para los docentes y es frecuente que tienda a enseñar como le gustaría que le enseñaran a él, es decir, enseñar como a él le gustaría aprender. Este proceso interno, inconsciente en la mayoría de las veces, aflora cuando cada docente tiene la oportunidad de planificar su curso y las actividades correspondientes. A su vez, los docentes no siempre necesitan configurar un marco teórico para la puesta en marcha y evaluación de los procesos de enseñanza-aprendizaje. Enseñar, tal como ocurre habitualmente, no siempre se realiza con un método que indique con exactitud que debe hacer el docente en el aula, sino que se desarrolla sobre un conjunto articulado de principios desde los que se enseña, se establecen juicios sobre los alumnos y se toman decisiones sobre cómo evaluar la enseñanza.

Pero la incorporación de recursos tecnológicos permite que los aprendizajes se produzcan sin la presencia física del docente. La diferencia entre ambas formas de enseñar –sistemas presenciales y sistemas a distancia– tiene en cuenta “la distancia” entre el docente y el alumno, y eso caracteriza al diseño de estos procesos de enseñanza-aprendizaje. Mientras que en los sistemas presenciales este diseño se basa fundamentalmente en la relación directa, cara a cara, docente-alumno y alumno-alumno, para generar el proceso de enseñanza-aprendizaje –producida en el aula real–, en los sistemas a distancia esta relación queda diferida en espacio y tiempo –y se produce, podríamos decir, en un “aula virtual”–.

En cuanto a la gestión de proyectos, con recursos ilimitados y tiempo infinito, todos son realizables, e incluso pueden ser eficaces. Desafortunadamente, el desarrollo de los proyectos EaD se caracteriza –como todos los proyectos en educación– por una materialización con recursos escasos y en tiempos reales: cumplir plazos y ser eficaces.

Es necesario y prudente, entonces, evaluar la factibilidad de un proyecto EaD tan pronto como se considere su viabilidad. Se pueden evitar meses o años de esfuerzo, así como millones de pesos en tecnología y equipos y miles de meses-hombre de



2

profesionales docentes en una inversión no siempre clara y calculable, si un proyecto EaD mal concebido es reconocido como tal en la etapa de las definiciones.

Por razones de organización, en este Módulo sólo nos referiremos a: 1) Evaluación de los aprendizajes en EaD 2) Gestión, evaluación y mejora de proyectos EaD. 3) Evaluación institucional y de programas EaD.

1. Expectativas de logro Comprender los problemas pedagógico-didácticos que implica todo proceso de

evaluación del aprendizaje. Reconocer los matices y diferencias que implica evaluar el aprendizaje en

proyectos a distancia, en relación a proyectos presenciales. Disponer de criterios acerca de las posibilidades y limitaciones del entorno

tecnológico en la educación a distancia Explorar, a la luz de esos criterios, las posibilidades de implementación de un

entorno tecnológico para educación a distancia.

2. La evaluación de aprendizajes en EaD La evaluación, como proceso inherente al acto educativo, es concebida como una

práctica continua e imprescindible para garantizar una formación de calidad. Evaluar las producciones de los alumnos y su proceso de aprendizaje significa

comprender sus maneras de resolver las situaciones y problemas planteados, considerando sus errores como indicadores de su proceso de construcción para desprender de allí las razones por las que se han cumplido, o no, las expectativas de logro propuestas y ajustar la intervención en el sentido que dicha interpretación indica.

En un proyecto de educación a distancia la evaluación no será una fase aislada sino que estará integrada del proceso mismo de aprendizaje, de manera que opere como un elemento más de aprendizaje y no sólo de control.

Entendida la evaluación como la acción de obtención de información acerca del aprendizaje del alumno, desarrollaremos algunas ideas acerca de la misma

Chang y Simpson (1997), tomando como argumento el grado de estructuración y de adaptación a los adultos, han sintetizado y clasificado cuatro modalidades de formación:

1) Aprender DE otros (Cursos); 2) Aprender SOLO (Autoformación); 3) Aprender CON otros (Seminarios, Grupos), y 4) Aprendizaje Informal, o no planificado, y abierto.

Con estas cuatro modalidades pueden configurarse distintas propuestas de

actividades formativas y, por supuesto, sus modalidades de evaluación de los aprendizajes.



3

¿Cómo es la evaluación en los procesos EaD? ¿Qué se evalúa? ¿Quién evalúa? ¿Cuándo evaluar? ¿Cómo se evalúa?

2.1 Concepto de evaluación La evaluación del aprendizaje es el proceso por el cual se obtiene información

que permite emitir un juicio respecto del aprendizaje y de la calidad de la mediación docente y tomar decisiones con vistas a la mejora de los mismos. Una evaluación comprometida con el proceso de enseñanza y aprendizaje, promueve la autoevaluación en el docente y en el alumno y favorece la comprensión de las cualidades de los logros y de las dificultades detectadas, los orígenes de las diferencias entre las hipótesis de aprendizaje y la realidad y la toma de decisiones derivadas de ella.

Los juicios de valor que se emiten en el proceso de la evaluación, derivan de la definición de aprendizaje que subyace a la tarea docente. Y partiendo de las implicancias de dicho concepto, el proceso de evaluación debe medir el grado de comprensión de los contenidos y reflejar un estado de capacitación en el que se pongan en juego las nuevas disponibilidades, adquiridas en forma de conocimiento declarativo, habilidades o actitudes.

En el proceso de evaluación es necesario permitir poner en funcionamiento las disponibilidades adquiridas y al mismo tiempo recibir información que permita conocer y ayudar a los alumnos a conocer más acerca del contenido evaluado y del mismo proceso de aprendizaje que se está llevando a cabo.

2.2. ¿Qué se evalúa en el proceso de evaluación de los aprendizajes? La evaluación es un dispositivo que permite analizar el rol docente como

facilitador de logros a partir de determinada propuesta de enseñanza y explicar el o los porqués de los resultados obtenidos.

En el proceso informal y formal de evaluación de los aprendizajes, se pueden obtener informaciones acerca del grado de pertinencia de los contenidos enseñados, de la eficacia de la metodología empleada en la enseñanza, de las posibilidades de transferir habilidades, de la efectividad de los recursos de los que se ha dispuesto. Puede evaluarse también el mismo proceso de evaluación (metaevaluación) que permita perfeccionar también este dispositivo didáctico.

2.3. ¿Cuándo se evalúa? Al iniciar un proceso de enseñanza es necesario detectar, a través de una

evaluación inicial o diagnóstica, las principales características de los destinatarios de las acciones docentes.

La evaluación formal o informal que se realiza durante el proceso de enseñanza permite rectificar el rumbo o confirmarlo sin esperar al término del proceso para poder retroalimentar el proceso. La evaluación realizada durante el proceso de enseñanza- aprendizaje se denomina evaluación formativa.

La evaluación que permite medir los logros del proceso desarrollado, se denomina final o sumativa y recoge información acerca de los dominios conseguidos.

En el siguiente cuadro (Cuadro 1) se refleja la modalidad de evaluación que podría ser utilizada en un curso con modalidad a distancia:

Cuadro 1. Modalidad de eauación en curso EaD



4

Aspectos Tipo Eval.

Propósitos Momento Forma

Diagnóstica

Conocer el perfil, expectativas, intereses y conocimientos previos de los alumnos.

Al inicio del curso, en un encuentro presencial de apertura.

Presencial A través de una ficha de inscripción y un cuestionario.

Procesual

Obtener información de las realizaciones de los alumnos. Reajustar las estrategias de intervención didáctica. Favorecer estrategias de autocontrol del propio aprendizaje de los alumnos.

Durante todo el desarrollo del curso en instancias grupales, individuales, presenciales y a distancia.

A distancia: Al finalizar cada núcleo temático mediante la realización de un trabajo grupal, integrador de los contenidos desarrollados. Resolución de ejercicios autoevaluados a través de claves de corrección. Consultas en los distintos tipos de tutoría. Grado de participación. Presencial En encuentros presenciales a través de la resolución de una situación de prueba elaborada con ítems objetivos y de ensayo.

Final

Verificar procesos de integración, aplicación y/o transferencia de los contenidos aprendidos.

Al finalizar el curso.

A distancia: Realización individual de un trabajo final que sintetice todos los aportes y sea una instancia de integración. Presencial: Defensa del trabajo y/o realización de un cuestionario con preguntas relacionadas con el marco teórico del curso.

2.4. Funciones de la evaluación

- Básica: Hace referencia a la posibilidad de retroalimentación por la información que suministra acerca del proceso de enseñanza y aprendizaje. - Para el aprendizaje y la enseñanza: permite contar con información que favorezca la autoevaluación docente (objetivos, contenidos, actividades, recursos, metodología, evaluación) y la orientación del aprendizaje y ajuste del proceso en función de los logros y las dificultades. Esta función se analiza detenidamente en el desarrollo del módulo. - Para el sistema escolar: La evaluación puede convertirse en un sistema codificado de notaciones que según los parámetros establecidos, promuevan la acreditación dentro de los niveles del sistema educativo.



5

- Para la sociedad: acredita conocimientos y habilidades a través de las certificaciones otorgadas.

2.5. Técnicas e instrumentos de evaluación. La eficacia de la evaluación depende de la calidad del programa de evaluación

que se diseñe, de su variedad de técnicas para recoger información de diversos aspectos del proceso y de la información que pueda aportar para la retroalimentación del proceso didáctico y del proceso de aprendizaje.

Según Alonso Tapia, los procedimientos formales para la obtención de información, necesitan de un criterio que permita decidir qué es lo que puede constituir un indicador válido de que el alumno ha conseguido los objetivos que se pretendían. 2.5.1 Procedimientos o técnicas • PREGUNTAS CLÁSICAS CORTAS: (con o sin información, con formulación abierta o cerrada). • PRUEBAS TIPO ENSAYO: implica seleccionar la información de respuesta y cómo ésta se organizará en una composición escrita. • PRUEBAS DE ELECCIÓN MÚLTIPLE: consta de una proposición base o pregunta y una serie de posibles soluciones, de las cuales una sola es correcta y las demás actúan como distractores. • MAPAS CONCEPTUALES: procedimiento gráfico para expresar y comunicar nuestro conocimiento sobre conceptos y relaciones entre los mismos en forma de proposiciones verbales. • RESOLUCIÓN DE PROBLEMAS: .pone en juego estrategias diversas para utilizar el conocimiento que se posee. • PRUEBAS A LIBRO ABIERTO.: requiere de habilidad en la localización de la información pertinente, organización de la información, comprensión de la interacción entre los temas de la evaluación y de la posibilidad de verter la propia opinión. • ESTUDIO DE CASOS: como en el caso de la resolución de problemas, se pone en juego la observación de la situación presentada para ser analizada a la luz de los conocimientos que se poseen. La realidad actúa de dispositivo para el desafío cognitivo y promueve el uso activo del conocimiento.

Las técnicas mencionadas no cumplen por sí mismas los objetivos que se enuncian en cada una de ellas sino que dependen de las consignas que las acompañen y no son mejores o peores en sí mismas sino en función de los criterios de evaluación del docente y de la información que se quiera obtener.

Los instrumentos de evaluación deben: Válidos:

- Debe poder evaluar lo que se pretende evaluar. - Adecuarse a los propósitos y situación específica de aplicación

Confiables:

- Debe poder unir la exactitud en la medición y sensibilidad para la



6

apreciación de la presencia, ausencia y las diferencias de magnitud de los rasgos que mide. - Debe también ser objetivo y medir lo que se pretende independientemente de la persona que lo aplica. - Debe asegurar la neutralización de influencias tales como la fatiga o nervios de los alumnos, o de factores externos que provoquen incomodidad en la resolución de las actividades.

Prácticos: - Debe permitir una adecuada administración, facilidad de análisis e interpretación de resultados. - Debe permitir y elaboración de conclusiones y la evaluación de la economía de tiempo, esfuerzo y costo de su utilización.

Útiles: - Los resultados deben ser útiles para la orientación de los alumnos, del docente, de la institución, de los padres de los alumnos y de los evaluadores de la calidad de la educación.

La clave en este punto radica en la necesidad de asegurar un tipo de información adecuado a la finalidad para la que se recoge. En el cuadro 2, se recogen y describen las cualidades que debe reunir una buena información como componente de una evaluación de calidad.

Cuadro 2. Cualidades que debe reunir la información para una evaluación de calidad (V.

García Hoz, 1996)

Cualidad Descripción Coherencia Concordancia entre losobjetivos planeados, la enseñanza

desarrollada y el contenido de la evaluación.

Suficiencia Su amplitud debe permitir la necesaria seguridad para emitir un juicio sobre el grado de dominio del ámbito de aprendizaje.

Representatividad Su composición ha de permitir apreciar el dominio de las diferentes partes en que se estructura el ámbito evaluado -contenidos y objetivos-con una equilibrada presencia de todos ellos.

Ponderación Se trata de que el peso de los diferentes elementos del contenido contribuya en forma adecuada a la configuración de las diferentes calificaciones.

Relevancia social El contenido debe seleccionarse de forma que el saber apreciado sea importante para la sociedad ante la que se acredita.



7

Relevancia científico/académica

El contenido debe seleccionarse sobre la base de lo que en cada disciplina es importante y representa el dominio de la misma.

Relevancia pedagógica El contenido debe permitirla identificación de las carencias, errores y dificultades experimentadas en el aprendizaje, y sus posibles causas.

Muchas de tales cualidades se pueden conseguir en gran medida construyendo

una tabla de especificaciones, especie de plano en la que quedan claras las intenciones del profesor -sus objetivos- y el medio con que los logrará: los contenidos de la asignatura. Para bien, resulta conveniente que la citada tabla sea la del programa que pretende desarrollar el profesor, dado que así se garantiza una enseñanza -en nuestro caso según nuestra propia metodología- acorde con lo planificado y se hace posible asegurar el máximo de coherencia de ambos aspectos -planificación y enseñanza- con el propio contenido de la evaluación. 2.6. A modo de reflexion

La evaluación consiste en la valoración, mediante criterios y referencias pre-especificadas de la información recogida de modo sistemático, como base para la toma de decisiones de mejora tanto del aprendizaje del alumno como del programa del profesor.

La evaluación debe servir, antes que a cualquier otra finalidad, para facilitar el



8

aprendizaje de los alumnos y para mejorar la actividad docente de los profesores. Ese es el marco de la evaluación formativa, la información obtenida en el proceso de evaluación debe ser compartida y utilizada a favor del mejoramiento de los procesos de enseñanza y aprendizaje y para modelar con la reflexión conductas de autoevaluación.

3. La gestión, evaluación y mejora de los proyectos EaD ¿Cómo es la gestión en los proyectos EaD? Como ocurre en casi todas las organizaciones sociales dedicadas a la educación,

para su gestión no siempre se dispone de un modelo homogéneo y general que pueda aplicarse en cualquier circunstancia histórica, geográfica, académica, u organizativa. Mucho menos cuando se intenta gestionar servicios e innovaciones educativas frente a objetivos y demandas que cambian muy rápidamente.

Frente a la complejidad que tiene actualmente la gestión de la institución educativa –incluso frente a desafíos históricamente impensados–, la racionalidad y la tecnología ocupan un rol cada vez más importante que, sorprendentemente, no resuelve ni agota al problema. La velocidad de los cambios obliga a las organizaciones a una modernización permanente de su quehacer y a una evaluación de la propia organización, donde tengan cabida tanto la gestión como la percepción de un futuro que aparece cambiante, y no siempre cuantificable en términos económicos.

Será necesario y prudente, entonces, poder evaluar la factibilidad de todo proyecto EaD tan pronto como se insinúe que puede implementarse. Al conocer elposible grado de viabilidad se pueden evitar meses de esfuerzo, y millones de pesos en tecnología y equipos y meses-hombre de profesionales docentes en una inversión no siempre clara y calculable. A su vez, si un proyecto EaD es reconocido como viable en la etapa de las definiciones se puede trabajar con más tranquilidad en su evaluación y en la correspondiente toma de decisiones.

Hoy también hacen EaD los nuevos proveedores de las “industrias culturales”, como las empresas de e-learning, los proveedores de plataformas y los diseñadores de programas educativos multimediales –en una gran maraña en la que se confunden los serios con los improvisados y los oportunistas–. Para estos promotores del e-learning, los mecanismos físicos que hacen posible a esos procesos se basan sólo en tres componentes:

1) la computadora y el software correspondiente, 2) Internet y la red de comunicaciones, y 3) la institución que provee los contenidos virtuales.

En esta configuración, los contenidos son tecnológicamente cada vez más sofisticados, lo que obliga a los diseñadores de sistemas de comunicación a adecuar la potencia de sus medios a ese flujo de información. A su vez, las permanentes mejoras en los medios de comunicación y en Internet, hacen indispensable un permanente aumento de la oferta a distancia en un sistema abierto y en constante evolución tecnológica, con la consecuente obsolescencia –habitualmente forzada– de los sistemas comprados ayer.

Antes de entrar en el análisis de factibilidad de proyectos EaD, describiremos muy brevemente dos modelos que tienen repercusión en este momento.

3.1 Modelos semi-presenciales, o blend –b-learning– Si, por diversos motivos, los sistemas EaD deben combinar su utilización con la

modalidad presencial, dan origen a lo que ha dado en denominarse modalidad



9

semipresencial, blend, o b-learning (blend: mezcla). La modalidad semi-presencial, como posición intermedia, utiliza estrategias de la modalidad presencial y de la EaD. Debemos aclarar que en EaD siempre existe la posibilidad de encuentros presenciales basados tanto en los requerimientos de los contenidos a enseñar como en la necesidad y las posibilidades del destinatario de interactuar con otros cursantes. Según A. Heinze y C. Procter (2004): “Algunas de las ventajas del aprendizaje semi-presencial son: la relación costo-efectividad tanto de la institución que ofrece la formación como para el alumno, la rápida actualización de los materiales, nuevas formas de interacción entre alumno-docente, y flexibilidad en la planificación y la programación del curso”.

Los modelos semi-presenciales, al vincular los atributos de la educación presencial y de la EaD en una combinación que tiende a aprovechar las ventajas de ambas modalidades. Las reuniones presenciales –de carácter obligatorio– ofrecen instancias de trabajo conjunto, "cara a cara", promoviendo la interacción con el tutor y con los otros alumnos que están realizando el curso. De esta manera cada alumno puede consultar con su tutor las dudas o cuestiones que se le van presentando en el desarrollo del curso y, además, tiene la posibilidad de realizar trabajos conjuntos con otros participantes, intercambiando con ellos ideas y producciones. Es decir, que la instancia presencial complementa, revisa y enriquece el trabajo realizado en los momentos no presenciales.

3.2. MOOC –Massive Open Online Course– Los MOOC –Massive Open Online Course: cursos online, masivos, abiertos–, son

cursos EaD anunciados como informales, abiertos y, a veces, gratuitos. En este nuevo modelo de "autoaprendizaje" social, desarrollados en comunidad,

muchas veces los propios compañeros de curso son los que colaboran para resolver dudas (peer-to-peer learning). Universidades como Stanford, MIT, Harvard y California-Berkeley, ya han dado su apoyo a estos cursos en términos de inversión, recursos y respaldo, y empresas como unX, Aprendo, Coursera, Lore, Canvas Network, OpenClass, edX, UniMOOC y Udacity, también dan soporte a esta tendencia.

¿Cuáles son sus atributos? Los MOOCs son una modalidad de formación a distancia basada en el

conocimiento masivo, cuyo objetivo es alcanzar un elevado número de alumnos gracias a su carácter participativo y abierto. Es un modelo de aprendizaje social –social learning– donde se “aprende de y con la comunidad que se genera en este tipo de cursos”. Un MOOC es abierto no porque se ofrezca gratis, sino porque la actividad, los contenidos y los recursos están abiertos y son accesibles para cualquier usuario de la red. Las características principales de casi todos los MOOCs pueden resumirse en:

- Gratuidad del acceso y sin limitación en el número de participantes: el número de plazas es ilimitado y el perfil de los destinatarios es heterogéneo (aquellos que tengan interés en los contenidos ofrecidos).

- Formación a distancia a través de Internet: los contenidos suelen estar disponibles de forma gratuita, sólo es necesario registrarse previamente para acceder al curso y disponer de computadora, o dispositivo móvil, con conexión a la red. Cuenta con la ventaja de la flexibilidad temporal y adaptación a los distintos ritmos de aprendizaje de los usuarios.

- La estructura del curso está diseñada para promover el aprendizaje autónomo, con variedad de recursos (videos, documentos, presentaciones, enlaces, etc.) y



10

espacios de comunicación y debate (foros). - El diseño instruccional busca generar espacios de conversación entre los

participantes, situando al aprendiz y las conexiones que genera durante el curso en el centro del proceso de aprendizaje en lugar de los contenidos, de modo que son los participantes quienes generan la mayor parte de los contenidos del curso.

- El diseño tecnológico facilita la actividad desarrollada por los participantes a través del uso de distintas plataformas y servicios de redes sociales.

- No existe certificación oficial para los usuarios libres (no pagos). Se premia el progreso en el curso con badges –insignias–, una especie de acreditación del aprendizaje informal.

Autores como A. Sangrá, de la Universitat Oberta de Catalunya, dice: “La educación virtual puede englobar los MOOC, pero va mucho más allá de lo que éstos son, quieren y pueden alcanzar. Es importante darse cuenta de esto”.

3.3. La evaluación de un proyecto EaD En primer término, se ha de circunscribir el universo de proyectos EaD sobre el

que se procederá a trabajar. A su vez, admitir que existen diferentes tipos de evaluación y que pueden establecerse diferencias entre ellas según diversos criterios:

a) qué objetivos se persiguen, b) quiénes lo realizarán, c) cuál es el tiempo de su realización, d) qué escala tiene y e) quién toma las decisiones estratégicas.

Partiendo de los antecedentes de evaluación de proyectos en economía, tendremos en cuenta la distinción clásica:

1) la evaluación previa –evaluación ex ante–, se realiza antes del comienzo del proyecto, tomando en cuenta factores anticipados en el proceso de toma de decisiones, y

2) la evaluación a posteriori –evaluación ex post–, que se realiza cuando el proyecto ya está en ejecución, o ha concluido, y las decisiones se adoptan a base de los resultados logrados.

1) Evaluación previa: Proporciona una serie de criterios que permitan establecer una decisión de tipo cualitativo, es decir si el proyecto debe o no ser ejecutado. Es posible ordenar los proyectos según su eficiencia económica o su eficacia social para lograr los objetivos perseguidos. El análisis del costo-beneficio, así como el de costo-efectividad, son metodologías aptas para la evaluación ex ante. Sin embargo, el análisis del costobeneficio es más adecuado para analizar proyectos económicos y el análisis costoefectividad, en este caso de efectividad pedagógico-didáctica, presenta mayores potencialidades para la evaluación de proyectos sociales como los de educación.

2) Evaluación posterior: Aquí es necesario establecer la diferencia que existe entre proyectos que están en pleno desarrollo, de aquellos que ya se han realizado. En aquellos proyectos que están en pleno desarrollo, lo cualitativo tiene una directa relación con si continuar o no el trabajo, en función de los resultados obtenidos hasta ese momento. En el caso de que se recomiende su continuidad, cobra realidad la dimensión cuantitativa, que trae aparejadas dos opciones:



11

a) mantener la estructura original del proyecto, o b) introducir modificaciones en su programación.

En este punto se plantean dos alternativas; 1) si es posible seguir aplicando este tipo de proyectos, que se adopta si a relación costo-beneficio, o 2) si la relación costo-efectividad es adecuada.

Si se establece que la relación costo-beneficio no es adecuada, pero la relación costo-efectividad si lo es, pueden darse tanto la decisión de no continuar aplicándolo, o la de subsidiar el proyecto por su interés social.

A partir del número de personas que se ven afectadas y de la magnitud de los recursos que se emplearán, es posible establecer diferencias entre la evaluación de grandes proyectos, y la de proyectos pequeños. Existen algunas diferencias importantes entre ambos tipos. En los grandes proyectos se recurre a una estrategia analítica y objetiva y la evaluación se descompone en las posibles dimensiones del proyecto. En los proyectos pequeños la estrategia predominante es la cualitativa y el énfasis se pone en la comprensión del proyecto en su conjunto dentro del contexto en el que se enmarca.

¿Qué evaluar del proyecto EaD? ¿Para qué evaluar el proyecto EaD? Se evalúa para elegir entre proyectos alternativos de igual eficacia social, o entre

diferentes opciones para ejecutar el mismo proyecto y de esa manera incrementar su eficacia. Tanto la selección de alternativas para la acción, como las modificaciones a la implementación de un proyecto EaD suponen un proceso de toma de decisiones dentro de la organización que piensa desarrollarlo y en el contexto de la que forma parte.

Como ocurre habitualmente, los directivos definen las políticas y establecen las prioridades entre los proyectos según los objetivos de la institución y adoptan decisiones determinando qué proyectos se llevarán a cabo y asignándoles recursos. A su vez, los administradores tienen la responsabilidad de distribuir los recursos para la consecución de los objetivos establecidos y deben generar modelos de asignación que optimicen la relación insumo económico-producto social obtenido. Por último, los gestores del proyecto –docentes, tutores, diseñadores y técnicos– son los que ejecutan los proyectos y se centran en los aspectos operativos, traduciendo los modelos a la práctica educativa.

3.4. Estudios de factibilidad

El análisis de viabilidad y el análisis del riesgo están relacionados de varias maneras. Si el riesgo del proyecto EaD es grande –por cualquiera de las razones vistas hasta ahora–, se reduce la posibilidad de tener un proyecto educativo de calidad. Por ello es conveniente centrar nuestra atención en cuatro áreas de interés básico:

1) Viabilidad pedagógico-didáctica: la determinación del proyecto en términos de gestión y transferencia de conocimiento que pudiera resultar conveniente, o convincente, para la institución dentro del desarrollo del sistema educativo.

2) Viabilidad económica: la evaluación del costo de desarrollo frente al beneficio final producido por el proyecto EaD desarrollado.

3) Viabilidad tecnológica: el estudio de la funcionalidad, el rendimiento y las restricciones que pueden afectar a la posibilidad de realización de un proyecto EaD aceptable.



12

4) Alternativas: una evaluación de los enfoques alternativos para el desarrollo del proyecto. También será necesario llevar a cabo un estudio de viabilidad para los proyectos

EaD en los “parece” que la justificación económica es obvia, el riesgo tecnológico es bajo, se esperan pocos problemas pedagógico-didácticos y no existe otra alternativa razonable. Obviamente, también será necesario cuando no se cumple alguna de las anteriores condiciones, debe realizarse el estudio.

¿Por qué? Porque cuando se adquiere el compromiso de concreción del sistema –la compra de la plataforma y el software, se diseñan y se producen los materiales, se capacita a los docentes, etcétera– y luego los alumnos inscriptos están por debajo de las estimaciones menos optimistas, las deudas, los créditos y las financiaciones pueden perturbar notablemente a la vida académica de la institución educativa.

La justificación económica es normalmente la principal consideración para la mayoría de los sistemas. Esa justificación económica comprende un rango de aspectos, entre los que predomina el análisis de costo-beneficio, las estrategias de ingresos a largo plazo, el impacto en otras carreras o en otros centros educativos, así como el costo financiero de los recursos que se necesitan para el desarrollo del proyecto y el crecimiento potencial del mismo.

La viabilidad tecnológica es frecuentemente el área más difícil de evaluar en esta etapa del proceso de desarrollo del sistema. Debido a que los objetivos, las funciones y el rendimiento de cada tecnología es, de alguna manera, incompleto y aparentemente confuso, cualquier configuración EaD puede parecer posible si no se hacen las consideraciones adecuadas. Es esencial que el proceso de análisis y de definición del proyecto pedagógico se realice en paralelo con el análisis de viabilidad tecnológica. De esta forma, se pueden juzgar las especificaciones concretas según se van determinando los requerimientos del diseño curricular.

Las consideraciones que van asociadas a la viabilidad tecnológica son: 1) Posibilidades del desarrollo: ¿puede ser diseñado el sistema EaD de tal forma

que las funciones y el rendimiento necesarios se consigan dentro de las condiciones determinadas por el proyecto pedagógico?

2) Disponibilidad de recursos: ¿hay personal calificado para desarrollar los elementos que componen al sistema EaD? ¿están disponibles para el sistema EaD los otros recursos necesarios –hardware y software–?

3) Tecnología: ¿se ha trabajado lo suficiente como para soportar al sistema EaD en todos sus aspectos? Los desarrolladores de los sistemas EaD son optimistas por naturaleza. Sin embargo, durante una evaluación de viabilidad tecnológica debería prevalecer una actitud crítica: las equivocaciones en esta etapa pueden ser desastrosas.

El grado en el que se consideran las alternativas muchas veces está limitado por restricciones de tiempo y de dinero; sin embargo, no se debería descartar cualquier alternativa legítima, aunque no tenga quien “la financie”.

El estudio de viabilidad puede documentarse en un informe separado de los otros documentos importantes de gestión e incluirse como apéndice en la especificación del sistema. Aunque el formato del informe de viabilidad puede variar, debe cubrir la mayoría de los aspectos importantes.

El estudio de viabilidad debe provocar una decisión: seguir-no seguir. Debe tenerse en cuenta que durante las etapas de planificación, especificación y desarrollo se



13

tomarán muchas decisiones de ese tipo (Cuadro 3). Cuadro 3. Estudio de viabilidad

3.5. Análisis económico

Entre la información más relevante que contiene el estudio de viabilidad se encuentra el análisis de costo-beneficio –una evaluación de la justificación económica señala los costos del desarrollo del proyecto y los contrasta con los beneficios tangibles (esto es, medibles directamente en dólares o en euros, más que en pesos) e intangibles del sistema.

El análisis de costo-beneficio es complicado porque los criterios varían según las características del sistema a desarrollar, el tamaño relativo del proyecto y la recuperación esperada de la inversión como parte del plan estratégico de la compañía. Además, muchos beneficios obtenidos de los sistemas basados en computadora son intangibles –una mejor calidad del diseño mediante una optimización iterativa, una mayor satisfacción de los alumnos y mejores decisiones de comunicación vía sitio Web, o email, u otro canal–. Puede ser difícil lograr comparaciones directas cuantitativas.

Como hemos visto anteriormente, el análisis de los beneficios diferirá dependiendo de las características del sistema EaD. Para ilustrar este hecho, consideremos los beneficios de los sistemas EaD que se desarrollan teniendo como principal objetivo una mejor cantidad, calidad, rapidez y organización de la información y su impacto en el entorno del usuario. Los beneficios que se pueden asociar a proyectos EaD pueden diferir substancialmente.

También debemos verificar el análisis costo-eficacia social del proyecto EaD.



14

3.6. Etapas a tener en cuenta

Para este análisis es conveniente tener en cuenta las siguientes etapas: 1) Diagnóstico de necesidades 2) Estudios de factibilidad 3) Organización institucional 4) Organización pedagógica 5) Producción de medios 6) Propiedad intelectual 7) Certificación del aprendizaje 8) Difusión del proyecto EaD 9) Implementación 10) Evaluación

1) Diagnóstico de necesidades: Identificación de necesidades de formación y educación a distancia en

comunidades o segmentos socio-económicos caracterizados con precisión. Incluye el estudio de necesidades por área regional o por área de conocimiento. (Se requiere identificar metodologías de detección de necesidades)

2) Estudios de factibilidad: Estudio tecnológico: identificación de las capacidades de infraestructura y

recepción ( Internet, recepción de satélite, telecomunicaciones, fibra óptica, etc.) de las comunidades potencialmente usuarias del servicio

Estudio Académico: identificación de las capacidades de organización académica de grupos receptores

Estudio financiero: identificación de costos, fuentes de financiamiento, relación costo - beneficio de los servicios de educación a distancia.

3) Organización institucional: Organización mínima para la administración de la educación a distancia, tanto

desde la parte emisora como desde la receptora. La organización puede ser “virtual” en la parte receptora. La parte emisora requiere organización que comprenda apoyo pedagógico, difusión y gestión de los servicios. Dicha organización puede aprovechar recursos institucionales existentes, pero es importante definir de manera explícita la educación a distancia entre sus actividades.

4) Organización pedagógica: Diseño curricular: la educación a distancia combina diversas modalidades que es

necesario vincular integralmente para el mejor logro de objetivos. Es importante identificar los mejores modelos curriculares y las mejores estrategias de aprendizaje para cada tipo de evento.

Contenidos: es importante una adecuada selección y dosificación de contenidos en función del modelo curricular elegido

Capacitación docente: es indispensable una capacitación docente específica para el uso de medios de educación a distancia. con el fin de aprovechar al máximo las potencialidades de cada modalidad. La capacitación no sólo debe incluir el uso de



15

medios, sino también el análisis de los objetivos de aprendizaje propios de cada tipo de proyecto EaD.

Evaluación del aprendizaje: La característica de la modalidad implica una diferente forma de plantear las estrategias de evaluación del aprendizaje y de la enseñanza. Es importante definir con claridad los criterios y buscar garantizar la calidad sin perder la flexibilidad.

5) Producción de medios: Las modalidades EaD implican una amplia difusión de la imagen institucional. Es

por eso de vital importancia cuidar los detalles de producción, de tal manera que se aprovechen al máximo tanto los recursos técnicos, como la experiencia acumulada institucionalmente en la materia.

6) Propiedad intelectual: El proyecto EaD debe incluir una estrategia explícita y adecuada de protección de

la propiedad intelectual de todos los materiales que se produzcan como apoyo de los servicios educativos a distancia.

7) Certificación del aprendizaje: La naturaleza de las modalidades de educación a distancia exigen una clara

definición de los criterios, requisitos y formas de certificación del aprendizaje para cada tipo de evento.

8) Difusión del proyecto EaD: Las estrategias de difusión deben considerar:

- diseño de medios, - recursos, - destinatarios, - canales de distribución, - infraestructura, - costo-beneficio, entre otros.

9) Implementación: Es importante establecer criterios de:

- cálculo de costos directos e indirectos, - cotizaciones, - estrategias de negociación y venta de servicios - contratos o convenios, etc.

10) Evaluación: Se requiere definir una estrategia para:

- la organización del proyecto EaD - el impacto del proyecto EaD en los participantes - la calidad y relevancia del aprendizaje.



16

3.7. Estimación de costos de un curso EaD Deberán tenerse en cuenta gastos por los siguientes conceptos: - Concepción y diseño del proyecto EaD. - Determinación de los objetivos generales y específicos, perfil del grupo de incidencia, programa de contenidos y medios didácticos. Recolección de datos, realización de encuestas, etcétera. - Redacción textos unidades didácticas, guía del alumno, pruebas de evaluación, cassettes e impresos complementarios; adaptación pedagógica y corrección de estilo. Realización de ilustraciones gráficas y fotográficas. Diseño y edición. - Fotocomposición de textos, corrección tipográfica, montaje y fotolitos. - Impresión de material didáctico: planchas, papel, impresión y encuadernación. (base: ¿1.000 ejemplares?). - Material audiovisual complementario: copias de soportes magnéticos: videos, audiocasetes, CD-ROM, con sus guías de uso. - Expedición de material didáctico: embalaje y transporte. - Tecnologías de comunicación, que tienen impacto sobre:

a) el número de sitios soportados, b) el medio soportado, c) la naturaleza de la interacción, d) el nivel de calidad, e) si el sistema es privado o público, f) seguridad y confiabilidad de las prestaciones.

Otros servicios: videoconferencias interactivas, televisión, etcétera. - Diseño Sitio Web y diversos materiales hipertextuales. - Servicios de tutoría: corrección de ejercicios y atención de consultas telefónicas y por correo (Base: un tutor por cada 20/50 alumnos según: contenidos a enseñar, entorno tecnológico y perfil del grupo EaD). - Tutoría presencial: retribución tutor y costo materiales de apoyo (Base: un tutor cada 20/50 alumnos, según: contenidos a enseñar, entorno tecnológico y perfil del grupo EaD). - Coordinación tutorías y Comisión de seguimiento. - Servicios de secretaría y administración: inscripción alumnos, apertura expedientes, recepción pruebas evaluación y consultas, distribución a docentes, transcripción, calificaciones y observaciones, actualización, datos para tutorías, elaboración y análisis de estadísticas. - Gastos indirectos de estructura y de amortización de instalaciones, plataforma y equipos informáticos. - Otros gastos: becarios, asesores técnicos, imprevistos. Como se aprecia, existen grandes diferencias entre los costos de inversión,

producción y distribución de los diferentes medios utilizados por los sistemas EaD. Las videoconferencias interactivas requieren, por lo menos, dos equipos



17

interconectados, cuyo costo de inversión es alto y debe ser distribuido entre un número relativamente pequeño de participantes. Además, en la actualidad, los costos de transmisión todavía son grandes.

La televisión requiere inversiones altas para el emisor, pero relativamente pequeñas para el receptor, por lo que puede llegar a un mayor número de usuarios (aún así, los costos de producción son mucho mayores que para la videoconferencia). Por lo tanto, es necesario hacer este tipo de análisis en cada caso y evaluar el mercado potencial de cada uno de los medios.

Otro punto importante de comparación en las aplicaciones EaD son los costos asociados. Ejemplo, se deben calcular:

a) los costos del salario del tutor, b) el material de los cursos, y c) el costo de usar las facilidades EaD en cada sitio.

Este costo de uso de las facilidades EaD depende de factores como: la naturaleza de la interacción requerida, el número y la localización de los sitios donde se provee EaD, el número de veces que se imparte el curso y la duración de cada sesión de clases, el medio y el nivel de calidad requeridos, y las facilidades de comunicación y servicios requeridos para interconectar a los diferentes sitios.

Por eso tiene sentido preguntarnos: ¿El modelo será de autoestudio con materiales interactivos? La literatura relacionada con los costos en EaD (Bates, 1999), da ejemplos de

estructura de costos muy variados, pero que tienen un factor común: casi todos suponen un gasto importante en el desarrollo de material hipertextual.

¿Se puede gastar tanto dinero en el desarrollo de programas –contenidos hipertextuales de muy alta calidad, y costo– que haga imposible recuperar la inversión?

Una respuesta clásica a esta pregunta es que para amortizar esa inversión es necesario incorporar un número mayor de alumnos por curso. Otra solución es repetir los cursos sin cambios importantes durante más tiempo: el costo de impartir el curso se reduce con sus repeticiones, que van amortizando el alto gasto de desarrollo de la material, de la plataforma, etcétera.

¿Un número mayor de alumnos de lo que tal vez seria aconsejable? ¿También se tendrían que repetir los mismos cursos? ¿Más de lo que sería aconsejable?¿Qué es lo aconsejable, si los otros factores

del proyecto también varían? Por otro lado los altos niveles de deserción de estos cursos que trabajan con esos

materiales indican que, por muy interactivos que parezcan, o sean, no logran motivar al alumno adecuadamente.

Podemos visualizar otra modalidad EaD: ¿El modelo es de estudio con algunos materiales interactivos y mayor

participación de los docentes y de los tutores? Este modelo, más cercano al docente con respecto a su enfoque pedagógico,

implica más personas y un mayor presupuesto en formación. Varias reflexiones más – con una orientación distinta que las anteriores– se pueden hacer en relación con esta modalidad.



18

Pero es evidente que hay una propuesta distinta de la estructura de enseñanza –y consecuentemente de costos: plataformas, software, diseño multimedial, son siempre más caros que un equipo de personas– que nace del requerimiento pedagógico que tiene en cuenta la necesidad de la interacción con el alumno. Este nuevo enfoque pedagógico se centra en otra opción como eje central del aprendizaje: los recursos y materiales utilizados tienen menos importancia que la actividad a la que apoyan, siendo el papel del docente, facilitador del proceso de aprendizaje.

¿Para qué escala? ¿100 alumnos; 1.000 alumnos; 10.000 alumnos? Como resultado de todos estos factores, el costo puede variar entre cientos de

dólares hasta mil dólares por hora de clase. Por ejemplo, un sistema EaD basado en satélites es mucho más costoso que otro basado en un Sitio Web y como medio de comunicación, por ejemplo, el teléfono, o el correo electrónico.

Nadie dice que los proyectos EaD requieren una elevada inversión inicial –tanto a nivel de tecnologías y software como en capacitación de docentes y tutores y en la elaboración de material didáctico–, y que si el proyecto no avanza satisfactoriamente por razones ajenas a su calidad educativa la institución no recupera la inversión realizada. Por ello, a nivel de propuestas es muy fácil hablar de las ventajas pedagógicas pero, para ser intelectualmente honestos, debemos hablar de la complejidad del proyecto EaD en su conjunto.

Posiblemente ahora se visualice con mayor claridad la necesidad de listar los aspectos o factores que consideramos importantes, dado que su posición incide en la estructura de costos de los Cursos EaD.

¿Cuáles es la información clave que necesita la Dirección para controlar el cumplimiento de los objetivos y medir la evolución del proyecto?

¿Qué criterios se utilizarán para definir prioridades? ¿Quién manejará las estrategias y quién tomará las decisiones? Obviamente, el éxito de estos proyectos dependerá de varios factores: 1) El prestigio de las instituciones: prestigio que es fácil perder si caemos en la

trampa del todo vale en la red y ofrecemos cursos sin calidad suficiente, tutores sin capacitar, material didáctico de dudosa calidad, etcétera.

2) Flexibilidad de sus docentes: su capacidad para adaptarse a las nuevas condiciones impuestas por las TIC´s.

3) Calidad de los soportes de los contenidos: ningún proyecto EaD tendrá calidad educativa si los soportes de los contenidos no son de calidad.

4) Entorno de comunicación: la interactividad no debe ser limitada a la relación docente-alumno, la formación superior también incluye el intercambio de experiencias y conocimientos entre los asistentes a los programas.

5) Reconstrucción de los ambientes de comunicación personal: el éxito de estos proyectos dependerá de la transformación de las actuales estructuras de la institución educativa. Para que exista una verdadera red de enseñanza, se necesita mucho más que telecomunicaciones, un entramado de personas, tecnología e instituciones, donde el elemento más importante lo constituye el factor humano.

La mayor barrera de entrada para el desarrollo de este tipo de estrategias es económica, dado que su implantación requiere mayores costos.



19

4. Síntesis Integradora ¿La enseñanza en este Siglo XXI será mixta? ¿La tendencia será que las ofertas educativas “mezclen” las buenas prácticas de

los cursos tradicionales con las ventajas que ofrecen las TIC: la educación virtual, el e-learning, o el b-learning (blended learning)?

¿Cómo es la evaluación institucional en estos proyectos EaD? Los comentarios realizados hasta el momento, nos permiten plantear que: 1) la utilización de las TIC en los procesos EaD suponen actividades más amplias

que el simple hecho de ubicar información en Internet, y 2) la figura del docente será relevante para su concreción, tanto desde el

seguimiento del proceso y el diseño de los materiales que serán ubicados en el contexto telemático, como del proceso de tutorización y seguimiento del estudiante en el proceso de aprendizaje.

La mayor o menor receptividad de estas modalidades trasciende a la institución educativa tradicional, sea universidad, instituto universitario o instituto terciario. Así es que hablamos de procesos EaD, concepto que intenta enmarcar la utilización de las TIC hacia el desarrollo de metodologías alternativas para el proceso de enseñanza-aprendizaje de adultos.

Las reflexiones que generan estas nuevas modalidades de enseñanza se pueden resumir en las siguientes líneas:

1) Comprender el cambio de los roles de los diferentes participantes (docente-alumno). 2) Aplicar estos nuevos roles en el diseño de programas de enseñanza- aprendizaje para estas nuevas modalidades de educación a distancia. 3) Comprender como la elección de tecnología podría afectar el diseño de los esquemas de enseñanza-aprendizaje. 4) Aprovechar las experiencias ya realizadas para mejorar y crear nuevos programas enseñanza-aprendizaje para estas modalidades de educación a distancia. Esta configuración abre un fecundo campo de análisis respecto a las posibilidades

y efectividad de estas modalidades: ¿Cuáles son los elementos básicos e indispensables –tecnológicos y

pedagógicos– de estos modelos de Campus Virtuales, estudiantes, materiales didácticos, docentes-tutores, sistemas de evaluación, inconvenientes, problemas técnicos y pedagógicos, ventajas de una infraestructura de red respecto a otra respecto a otras, etcétera?

¿Cuál es su efectividad –índices de matriculación frente a los que finalizan el curso, deserción, aprobados, satisfacción de los alumnos, etcétera-?

Todo ello lleva a generar: a) Un sistema de comunicación didáctica basado en distintos soportes tanto en

texto escrito, como material multimedial, audiocasetes, videos, de carácter integrado. b) Un sistema de comunicación interactiva y de apoyo –desde Internet con una

página Web y con correo electrónico– con el docente-tutor-orientador.



20

c) Una organización y planificación previa, con producción del material didáctico necesario para adaptarse a la nueva metodología de enseñanza

Las decisiones sobre temas sencillos se prestan para un análisis minucioso y acabado –se puede calcular exactamente si es más barato hacer 1.000 fotocopias o 1.000 impresiones offset–- por lo que analizarlas en detalle da la sensación placentera de precisión. Las decisiones estratégicas, como la de implementar un entorno tecnológico para EaD, son mucho más complejas. Para analizar este tipo de proyecto hay que “predecir” el futuro, incierto en innumerables aspectos: las demandas futuras, el comportamiento de la sociedad, las tecnologías que estarán disponibles, las políticas económicas que se implementarán, la cultura del país, etcétera.

Las decisiones estratégicas son más complicadas de tomar, ya que su irreversibilidad obliga a predecir un futuro incierto en múltiples dimensiones y tienen un impacto desproporcionadamente alto en la operación de la organización educativa. Uno de los desafíos más grandes que enfrentan los directivos que operan en una organización educativa es cómo evaluar las decisiones estratégicas en situaciones globales con alta incertidumbre, y competitivos, como los de hoy.

El dinamismo y la volatilidad de los elementos en la realidad actual en todos los ámbitos –los medios de comunicación, las empresas, las asociaciones profesionales, las universidades–, nos llevan a una situación de continuo aprendizaje: hay que afrontar una publicitada pero dura “sociedad del conocimiento” donde los aprendizajes adquiridos ya no serán, nunca más, suficientes y acabados sino, simple base para construir nuevos conocimientos, nuevas destrezas y nuevas estrategias para adaptarse a las diversas y cambiantes situaciones de la realidad en general, y del mundo del trabajo en particular.

Nota para el alumno/a: Los contenidos de este módulo deberá completarse con la siguiente lectura:

García Aretio, L. (2001). “La educación a distancia. De la teoría a la práctica” Barcelona: Ariel. Capítulo 11: La evaluación

5. Bibliografía: Bates, A. (2001). Cómo gestionar el cambio tecnológico. Barcelona: Gedisa Cebrián, M. (Coord.) (2000). Campus virtuales y enseñanza universitaria. Málaga, IEEV. Gento Palacios, S. (1998): El Modelo Europeo de Calidad en una Universidad a

Distancia (The European Model of Quality for a Distance University). Revista Iberoamericana de Educación a Distancia (RIED), 1, 2.

Levy, P (1999). ¿Qué es lo virtual? Barcelona, Paidós. Martínez Mediano, C. (1998). La práctica tutorial en la UNED. Madrid: UNED Moore, M. y Cozine, G. (2000). Web based communications, the internet, and distance

education. Reading in Distance Education Number 7. The American Center for the study of distance education. PennState, Pennsylvania

Salinas, J (1998). Enseñanza flexible, aprendizaje abierto. Las redes como herramientas para la formación. Málaga, ICE.

Gestión y evaluación de aprendizajes y proyectos EaDcampus.fundec.org.ar/admin/archivos/modulo...

Documents

Transcript of Gestión y evaluación de aprendizajes y proyectos EaDcampus.fundec.org.ar/admin/archivos/modulo...