CALIDAD DE LA FORMACIÓN VIRTUAL Y DE LOS MATERIALES MULTIMEDIA.
Pere Marquès Graells (2003)
Departamento de Pedagogía Aplicada, Facultad de Educación, UAB

A partir de la consideración de los elementos estructurales y personales de los materiales didácticos multimedia (CD, on-line) y de los EVA, se destacarán las principales dimensiones a considerar para determinar la calidad de estos productos, considerando aspectos .técnicos, pedagógicos, funcionales y pragmáticos.

Se tratará pues de presentar un marco analítico genérico que englobe en un único esquema las dimensiones básicas a considerar en las evaluaciones de cada uno de estos materiales.

LOS ENTORNOS FORMATIVOS MULTIMEDIA

Entendemos por entornos formativos multimedia dos tipos de productos:

- Los materiales didácticos multimedia (en soportes disco y on-line), que comprenden todo tipo de software educativo dirigido a facilitar unos aprendizajes específicos, desde los clásicos programas de EAO (Enseñanza Asistida por Ordenador) en soporte disco hasta los actuales entornos educativos multimedia on-line, con conexiones y funciones que aprovechan el infinito universo de recursos y servicios de Internet para facilitar unos aprendizajes específicos.

- Los cursos impartidos en entornos virtuales de aprendizaje (EVA), cursos integrados generalmente por diversas asignaturas que se desarrollan a través de las funcionalidades de un entorno tipo "campus virtual". Los "campus" virtuales, con los que se pueden impartir tipo de cursos, son plataformas tecnológicas on-line a través de las cuales se ofrecen unos contenidos formativos y la asistencia de un equipo de profesores, consultores, tutores, coordinadores, técnicos....

Al considerar la evaluación de la calidad de estos entornos formativos multimedia, hemos de distinguir al menos dos dimensiones:

- Las características intrínsecas de los entornos, que nos permitirán realizar una evaluación objetiva de los mismos
- La forma en la que se utilizan estos entornos en un contexto formativo concreto, ya sea de manera autodidacta por parte del propio estudiante o bajo la orientación de un docente o tutor (evaluación contextual). En este caso, más que evaluar el propio material formativo, lo que se evalúa son los resultados formativos que se obtienen y la manera en la que se ha utilizado.

Por supuesto que la aplicación que se haga de los entornos dependerá de sus potencialidades intrínsecas, pero su eficacia y eficiencia dependerá sobre todo de la pericia de los estudiantes y docentes.

ELEMENTOS ESTRUCTURALES BÁSICOS

Todos estos entornos formativos multimedia, cuya razón de ser es facilitar determinados aprendizajes a los estudiantes usuarios de los mismos, tienen los siguientes elementos estructurales básicos:

- Planteamientos pedagógicos:

- Modelo pedagógico: concepción del aprendizaje; roles de los estudiantes, docentes, materiales didácticos...
- Plan docente: objetivos, secuenciación de los contenidos, actividades de aprendizaje, metodología, evaluación...
- Itinerarios formativos previstos
- Funciones de los profesores, consultores y tutores

- Bases de datos, que constituyen los contenidos que se presentan en el entorno; los aprendizajes siempre se realizan a partir de una materia prima que es la información.

- Textos informativos: documentos, enlaces a páginas web...
- Materiales didácticos, que presentan información y utilizan recursos didácticos para orientar y facilitar los aprendizajes.
- Guías didácticas, ayudas, orientaciones....
- Fuentes de información complementarias: listado de enlaces a páginas web de interés, bibliografía, agenda...
- Pruebas de autoevaluación

- Actividades instructivas, que se proponen a los estudiantes para que elaboren sus aprendizages. Pueden ser de tres tipos:

- Actividades autocorrectivas
- Actividades con corrección por parte del profesor o tutor
- Otras actividades: trabajos autónomos de los estudiantes, actividades en foros...

- Entorno tecnológico interactivo (programa, campus) que se ofrece al estudiante:

- Entorno audiovisual: pantallas, elementos multimedia...
- Sistema de navegación: mapa, metáfora de navegación...
- Sistemas de comunicación on-line (e-mail, webmail, chat, videoconferencia, listas...): consultas y tutorías virtuales, aulas virtuales (foros sobre las asignaturas moderados por los profesores), calendario/tablones de anuncios, foros de estudiantes (académicos, lúdicos...).
- Instrumentos para la gestión de la información: motores de búsqueda, herramientas para el proceso de la información, discos virtuales...

- Elementos personales: Aunque la asistencia de especialistas (consultores, tutores, técnicos...) solamente resulta imprescindible en los cursos impartidos en EVA, poco a poco va estando presente también en los demás materiales formativos multimedia, sobre todo en forma de asesoramiento técnico o pedagógico on-line.

- Asistencia pedagógica (profesores, consultores, tutores...)
- Asistencia técnica
- EN EL CASO DE EVA: Asistencia administrativa (secretaría, información general sobre el entorno), coordinación de asignaturas y cursos, etc.

PLANTILLA PARA SU CATALOGACIÓN Y EVALUACIÓN

A continuación nos centraremos en la evaluación objetiva de estos entornos formativos multimedia, presentando una plantilla para su catalogación y evaluación que considera diversos indicadores atendiendo aspectos técnicos, pedagógicos y funcionales derivados de sus elementos estructurales.

IDENTIFICACIÓN DEL ENTORNO: (completar los apartados con la información que se solicita)

- Tipología. Indicar si se trata de un material multimedia en disco, material multimedia on-line o curso en EVA

- Título del programa o curso (+ versión/año, idiomas)

- Archivo de instalación o dirección URL (+ advertir si requiere el registro del usuario o password)

- Editor o institución que imparte el curso (+ lugar, web)

- Créditos: autor del programa o director del curso (+ e-mail)

- Temática: área, materia, ¿es transversal?...

- Objetivos formativos que se explicitan en el programa o en la documentación.

- Contenidos (+ especificar los de cada asignatura si se trata de un curso)

- Breve descripción de las actividades formativas que se proponen

- Destinatarios: etapa educativa, edad, conocimientos previos, otras características.

- Mapa de navegación del entorno

- Infraestructura (hardware y software) necesaria para los estudiantes

ASPECTOS TÉCNICOS Y ESTÉTICOS (valorar cada item según la escala: EXCELENTE, ALTA, CORRECTA, BAJA)

- Entorno audiovisual: presentación, estructura de las pantallas, tipografía, colores, disposición de los elementos multimedia, estética...

- Elementos multimedia: calidad, cantidad.

- Navegación: mapa de navegación lógico y estructurado, metáfora intuitiva...

- Hipertextos: actualizados, enlaces descriptivos...

- Diálogo con el entorno tecnológico: interacciones amigables, fácil entrada de órdenes y respuestas, análisis avanzado de los inputs por el ordenador, comprensión del feed-back que proporciona el entorno...

- Sistemas de comunicación on-line: Indicar los medios que se utilizan en las consultas y tutorías virtuales, aulas virtuales, calendario/tablón de anuncios, foros de estudiantes (e-mail, chat, videoconferencia, listas...): ______________________________

- Herramientas para la gestión de la información. Indicar cuales se ofrecen (disco virtual, listado de enlaces favoritos, motores de búsqueda, calculadora, bloc...): _______________________________

- Funcionamiento del entorno: fiabilidad, velocidad adecuada, seguridad...

- Uso de tecnología avanzada

ASPECTOS PEDAGÓGICOS (valorar cada item según la escala: EXCELENTE, ALTA, CORRECTA, BAJA)

- Plan docente: objetivos claros y explícitos

- Motivación: atractivo, interés...

- Contenidos (documentos y materiales didácticos): coherencia con los objetivos, veracidad, profundidad, calidad, secuenciación, estructuración, claridad, actualización, corrección gramatical...

- Relevancia de los elementos multimedia: relevancia de la información que aportan para facilitar los aprendizajes.

- Guías didácticas y ayudas: información clara y útil, buena orientación al destinatario...

- Flexibilización del aprendizaje: incluye diversos niveles, itinerarios...

- Orientación del usuario (a través del propio material, consultas o tutoría) sobre el plan docente, los posibles itinerarios a seguir y las opciones a su alcance en cada momento

- Tutorización de los itinerarios: en función de las respuestas (acertadas o erróneas) de los usuarios en las actividades de aprendizaje sugiere automáticamente determinados contenidos y/o actividades

- Autonomía del estudiante: toma de decisiones en la elección de itinerarios, recursos para la autoevaluación y el autoaprendizaje...

- Recursos didácticos: potencialidad y multiplicidad de los recursos didácticos que se utilizan (síntesis, ejemplos...)

- Múltiples actividades: se proponen múltiples y diversas actividades formativas.

- Enfoque crítico /aplicativo / creativo de las actividades dirigido a la construcción de conocimiento (no memorístico)

- Aprendizaje colaborativo: inclusión de actividades colaborativas y recursos para ello (foros, discos virtuales compartidos)...

- Corrección de las actividades: la mayor parte de las actividades se corrigen adecuadamente de manera automática o por el consultor...

- Adecuación a los destinatarios de los contenidos, actividades...

- Evaluación de los aprendizajes: sistema de seguimiento y evaluación de los aprendizajes, pruebas de evaluación...

- Sistema de apoyo docente y tutorial: servicio de consultas, aulas virtuales, tutoría virtual...

ASPECTOS FUNCIONALES (valorar cada item según la escala: EXCELENTE, ALTA, CORRECTA, BAJA)

- Facilidad de uso del entorno

- Facilidad de acceso e instalación de programas y complementos

- Interés y relevancia de los aprendizajes que se ofrecen para los destinatarios

- (*) Eficacia didáctica: facilita el logro de los objetivos que se pretenden, bajo índice de abandonos y fracaso

- Versatilidad didáctica: ajuste de parámetros, bases de datos modificables, registro de la actividad de cada usuario, proporciona informes...

- Fuentes de información complementaria: múltiples enlaces externos, bibliografía, agenda, noticias...

- Canales de comunicación bidireccional: existencia de foros, consultorías...

- Recursos para gestión de la información: buscar y procesar datos, discos virtuales...

- (*) Servicio de apoyo técnico on-line

- (*) Sistema de apoyo docente y tutorial

- (*) Servicios de información general y secretaría (solamente en el caso de tratarse de un EVA).

- Carácter completo: proporciona todo lo necesario para realizar los aprendizajes previstos

- Créditos: los contenidos indican la fecha de la última actualización y los autores.

- Ausencia o poca presencia de la publicidad

- Editor de contenidos (facilita a los profesores la modificación de las bases de datos: materiales didácticos, guías...)

VALORACIÓN GLOBAL (valorar cada metaindicador según la escala: EXCELENTE, ALTA, CORRECTA, BAJA)

- Calidad técnica del entorno: promedio de la valoración de los aspectos técnicos

- Potencialidad didáctica: promedio de la valoración de los aspectos pedagógicos

- Funcionalidad, utilidad: promedio de la valoración de los aspectos funcionales + valoración de la eficacia por los usuarios

- Servicios personales: valoración de los servicios personales (indicados con * por los usuarios

- Aspectos más positivos del entorno formativo:

- Aspectos más negativos:

- Otras observaciones:

NOTAS:

- Para obtener una estimación objetiva sobre los indicadores señalados con (*) (habría que consultar a estudiantes que hayan utilizado el entorno).
- Orientaciones para la utilización de la escala de valoración:

- Valoración BAJA: cuando el material no resulta "correcto" en este aspecto; nuestra respuesta ante el enunciado es: NO, POCO.
- Valoración CORRECTA / NORMAL / ACEPTABLE: nuestra respuesta ante el enunciado es: SI, BASTANTE.
- Valoración ALTA: si el material es "muy bueno" en este aspecto; nuestra respuesta ante el enunciado es: MÁS QUE CORRECTO, MUY BIEN.
- Valoración EXCELENTE: cuando nos merece la máxima admiración el programa en este aspecto.

FUENTES DE INFORMACIÓN.

- AEDO, Ignacio; DÍAZ, Paloma (1998). "Evaluación de sistemas hipermedia orientados al aprendizaje". Educación y Tecnologías de la Comunicación. 161-173" Oviedo: Universidad de Oviedo.
- BARROSO, J et al. (1998). "Evaluación de los medios informáticos: una escala de evaluación para el software educativo". En CEBRIÁN, M. Et al. Creación de materiales para la innovación con nuevas tecnologías: EDUTEC97. Pp. 355-358" Málaga: ICE Univ. Málaga
- CABERO, Julio; DUARTE, Ana (2000). "Evaluación de medios y materiales de enseñanza en soporte multimedia". Comunicación y Pedagogía, 166, pp. 15-28
- GALLEGO,María Jesús. (1994) El ordenador, el currículum y la evaluación de software educativo. Granada: Proyecto Sur de Ediciones.
- GÓMEZ DEL CASTILLO, Teresa. (1998). "Un ejemplo de evaluación de software educativo multimedia". En EDUTEC 97." Málaga: ICE Universidad
- GROS, Begoña (1977). Diseños y programas educativos. Pautas pedagógicas para la evaluación de software. Barcelona: Ariel Educación.
- MAJÓ, Joan; MARQUÈS, Pere (2002). La revolución educativa en la era Internet. Barcelona: CissPraxis
- MARQUÈS GRAELLS, Pere (1995). Software educativo: guía de uso y metodología de diseño. Barcelona: Editorial Estel.
- MARQUÈS GRAELLS, Pere (1998). "La evaluación de programas didácticos". Comunicación y Pedagogía, nº 149, pp. 53-58.
- MARQUÈS GRAELLS, Pere (1999). "Evaluación de programas educativos multimedia" En FERRÉS, Joan y MARQUÈS, Pere (Coord.)(1996-..). Comunicación Educativa y Nuevas Tecnologías. Pp. 320/23-320/29" Barcelona: Praxis
- MARQUÈS GRAELLS, Pere (2000). "Criterios de calidad en los programas educativos". Revista MasPC, núm.8, pp. 218-219"
- MARQUÈS GRAELLS, Pere (2000). Elaboración de materiales formativos multimedia. Criterios de calidad. Actas del XII Congreso Nacional I Iberoamericano de Pedagogía, vol-II, pp. 288-289. SEP. Madrid, 26-30 septiembre" Madrid: SEP
- MARQUÈS GRAELLS, Pere [en línea]. La web de Tecnología Educativa. http://peremarques.net [consulta: 1-9-2003]
- MARTÍNEZ, Francisco et al. (2002). "Herramienta de evaluación de multimedia didáctico". Revista Pixel.Bit, 18"
- MURILLO TORRECILLA, Fco. Javier (1992). Software Educativo. Algunos criterios para su evaluación. Infodidac, 18, pp 8-12
- SQUIRES,D./McDOUGALL (1997). Como elegir y utilizar software educativo. Madrid: Morata.
- VILLAR, M; MÍNGUEZ, E. (1998). Guía de evaluación de software educativo. Grupo ORIXE. Euskadi.

http//peremarques.net