Evaluación de la Calidad de los Cursos Basados
en web de Sistemas de Información
Fernando Martínez
Universidad Central de Venezuela
Caracas- Venezuela
fmartinez@alpha.ciens.ucv.ve
http://alpha.ciens.ucv.ve
http://celebris.ciens.ucv.ve
Resumen
El trabajo describe la evaluación de la calidad de los Cursos Basados en Web desarrollados en el
Laboratorio de Groupware del área de Sistemas de Información de la Universidad Central de
Venezuela durante los años 2000 al 2003. Realiza con el fin de mejorar el aprendizaje. Un Curso
Basado en Web es un proceso de instrucción automatizado (Sistemas de Información Groupware-
Workflow) que puede accesarse vía Web-Internet a través de un Sistema Administrador de Cursos.
Se pueden encontrar dos tipos de procesos que coexisten de manera iterativa, incremental y
evolutiva y que deben ser evaluados, junto con su software para administrarlos: Proceso de
Desarrollo de Cursos; Proceso de Gestión de Cursos; Sistema Administrador de Cursos. Para la
elaboración del Proceso de Desarrollo de Cursos se tomó como referencia el modelo de diseño
instruccional de un curso propuesto por Martínez (2001), así como también otros modelos de
diseño instruccional. Su ejecución continúa con la instanciación (ejecución) de un Proceso de
Gestión de Cursos o módulos generándose un conjunto de sugerencias de mejoras que serán
utilizadas posteriormente. En el Proceso de Desarrollo de Cursos Basados en Web incluimos cuatro
fases secuenciales iterativas: Análisis, Diseño, Construcción e Implantación y una quinta fase de
Evaluación que se lleva a cabo paralelamente con cada una de las fases. Los recursos utilizados
incluyen al personal (Grupo de estudiantes, Grupo de profesores, Grupo de construcción, Grupo
de coordinación y Grupo de soporte técnico) y los medios de desarrollo de aplicaciones
Groupware-workflow. En el Proceso de Gestión de Cursos Basados en Web incluimos las
actividades instruccionales (enseñanza-aprendizaje) junto con el proceso de aprendizaje que se
lleva a cabo durante la gestión de un Curso Basado en Web. Se incluyen actividades de
evaluación que se realizan paralelamente con cada una de las otras actividades. Los recursos
utilizados incluyen al personal (Grupo de estudiantes, Grupo de profesores, Grupo de
coordinación y Grupo de soporte técnico) y los medios instruccionales. En el Sistema
Administrador de Cursos encontramos las facilidades para desarrollar y gestionar los Cursos
Basados en Web. Se aplicaron diferentes cuestionarios y encuestas a los diferentes grupos de
trabajo que intervienen en el desarrollo y gestión de los Cursos Basados en Web. Se evaluó la
adaptación realizada del proceso de desarrollo de software con calidad al Proceso de Desarrollo
de Cursos Basados en Web. Además se evaluaron los Cursos Basados en Web partiendo de algunos
modelos de evaluación existentes. También se evaluaron diferentes Sistemas Administradores de
Cursos.
Palabras claves: Curso basado en web, diseño instruccional, estrategia instruccional, groupware-
workflow, evaluación de la calidad, calidad de software.

La evaluación de la calidad la enfocamos como un Sistema de Aseguramiento de la
Calidad (meta-proceso) de los procesos involucrados. Así se busca el mejoramiento
(evaluación) a través de retro-alimentar y pro-alimentar de cada proceso.
Basados en ISO9001, ISO9000-3 [COVENIN94], [ISO99], proponemos para nuestro
caso lo que el Sistema de Aseguramiento de la Calidad debe contener:
1. Criterios de calidad (objetivos o normas) para comparar contra los resultados
obtenidos en las mediciones.
2. Sistema de Calidad.
2.1. Estructura para la calidad
2.2. Actividades para asegurar la calidad
3. Decisiones (experiencias y resultados) respecto a las desviaciones o cambios en los
objetivos y procesos evaluados.
Criterios de Calidad
Los criterios de calidad de los cursos pueden ser externos o internos. Externos, si buscan
justificar la existencia del departamento o laboratorio responsable de los cursos en la
organización, o el curso (programa) dentro del departamento. Internos, si buscan demostrar
el aprendizaje (aprendizaje de conocimientos, desarrollo de habilidades o cambios de
actitudes).
Nosotros colocamos como objetivo del meta-proceso de evaluación de la calidad, mejorar
el aprendizaje que se realiza en nuestros cursos de Sistemas de Información. Aunque el
aprendizaje ocurre dentro de los alumnos buscamos mejorar los Procesos de Desarrollo de
Cursos, Procesos de Gestión de Cursos y Sistemas Administradores de Cursos que llevan a
ese aprendizaje.
Buscamos que el aprendizaje sea:
- Eficaz (coherencia entre los objetivos instruccionales y los resultados alcanzados por el
Cursos Basado en Web, es decir, aprendizaje de los objetivos instruccionales)
- Eficiente (coherencia entre recursos usados, como grupos de alumnos, grupos de
profesores, grupo de coordinación, grupo de construcción, grupo de soporte técnico, medios
instruccionales, medios de desarrollo de software y los objetivos alcanzados)
- Pertinente (coherencia entre los perfiles profesionales o potenciales cargos, es decir,
cargos en instituciones públicas y privadas en Venezuela y los objetivos instruccionales
presentados en los Cursos Basados en Web de Sistemas de Información)

Sistema de Calidad
El Sistema de Calidad abarca toda la organización, en este caso, nos limitaremos al
Laboratorio de Groupware de la Universidad Central de Venezuela, como ente
desarrollador y gestionador de Cursos Basados en Web.
La evaluación de la calidad de los Cursos Basados en Web busca el aseguramiento de la
calidad con la existencia de un Sistema de Aseguramiento de Calidad, es decir, que exista
un Sistema de Calidad (un meta-proceso planificado y sistemático de todas las acciones
necesarias para proveer la confianza adecuada de que un Curso Basado en Web responde a
los Requerimientos de Calidad establecidos). Esto incluye los Criterios de Calidad y las
actividades para evaluar tanto al Sistema de Calidad como los procesos por medio de los
cuales el curso es desarrollado y gestionado. (Lo descrito anteriormente es una adaptación
personal de los conceptos de Sistema de Aseguramiento de Calidad, Sistemas de Calidad y
Requisitos de Calidad [IEEE99], [ISO99]).
El alcance de este trabajo comprende la parte del desarrollo de un software (Cursos
Basados en Web) con su instalación y posterior mantenimiento, para lo que usamos las
especificaciones planteados en la norma ISO-9000-3, donde se establecen los lineamientos
para facilitar la aplicación de la Norma ISO 9001 en organizaciones dedicadas al desarrollo
y mantenimiento de software.
En la presente ponencia nos limitaremos a verificar la existencia de procesos sistemáticos
de desarrollo y gestión de Cursos Basados en Web de Sistemas de Información, dejando
para posteriores trabajos la verificación del Sistema de Calidad existente.
Estructura para la Calidad
El Laboratorio de groupware posee una estructura organizativa con misión, visión,
proyectos y recursos humanos capacitados para realizar Cursos Basados en Web. Existen
especificaciones de entrada, procesos, salidas, verificaciones, validaciones, contratos, plan
de calidad, controles, métodos, requisitos, documentación, recursos (hardware, software,
infraestructura física) y personal para el desarrollo y gestión de Cursos Basados en Web de
Sistemas de Información, buscando cumplir con la Normativa ISO 9001 para Sistemas de
Calidad [ISO 9001 95]. El Sistema de Calidad posee un proceso integrado a lo largo de
todos los proyectos, asegurando que la calidad se vaya incorporando a medida que avanza
el desarrollo de un curso, en vez de buscarla o descubrirla al final del proceso.
Actividades para Asegurar la Calidad
Las actividades para asegurar la calidad incluyen las verificaciones y validaciones sobre
los procesos a ser evaluados. Para las verificaciones y validaciones usamos cuestionarios y
encuestas que se aplicaron a todos los grupos de trabajo involucrados tanto en el Proceso de
Desarrollo de Cursos como en el Proceso de Gestión de Curso. Esos grupos de trabajo son:
Grupo de estudiantes, Grupo de profesores, Grupo de construcción, Grupo de coordinación

y Grupo de soporte técnico, quienes han participado tanto en los Procesos de Desarrollo de
Cursos como en los Procesos de Gestión de Cursos. Además, se evalúa al Sistema
Administrador de Cursos usado mediante una revisión del cumplimiento de criterios
[LANDON99], [De BENITO2000].
Las actividades de evaluación de la calidad las enfocamos desde tres aspectos de los
Cursos Basados en Web:
a.- Calidad del Proceso de Desarrollo de Cursos Basados en Web.
b.- Calidad del Proceso de Gestión de Curso.
c.- Sistema Administrador de Cursos.
Actividades de evaluación de la calidad del Proceso de Desarrollo de Cursos Basados
en Web
Para la elaboración del Proceso de Desarrollo de Cursos se tomó como referencia el
modelo de diseño instruccional de un curso propuesto por el Prof. Fernando Martínez
[MARTINEZ2001], así como también otros modelos de diseño instruccional [DICK2001],
[CONRAD2000], [RICKERLMAN2001], [DORREGO1991].
El Grupo de desarrollo lo formamos con cinco grupos de trabajo (Grupo de estudiantes,
Grupo de profesores, Grupo de construcción, Grupo de coordinación y Grupo de soporte
técnico). Cada uno de los integrantes de cada grupo debió cumplir un conjunto de requisitos
establecidos por el Laboratorio de Groupware y la Escuela de Computación.
El Proceso de Desarrollo de Cursos o módulo contiene cuatro fases secuenciales
iterativas: Análisis, Diseño, Construcción e Implantación y una quinta fase de Evaluación
que se lleva a cabo paralelamente con cada una de las fases [RICKERLMAN2001],
[MARTINEZ2002b].
Figura N° 1
Proceso de Desarrollo de Cursos basados en Web
Proceso de Desarrollo de
Cursos Basados en Web
Entradas - Proceso - Producto resultante por fase:
Documento de Informe sobre Informe de Diseño Curso construido
solicitud Especificaciones de contenidos en LearningSpace
de curso del curso
ANALISIS DISEÑO CONSTRUCCION IMPLEMENTACION
Informe sobre Informe de Diseño Curso construido Curso instalado
Especificaciones de contenidos en LearningSpace Lista de usuarios
del curso y password
de acceso
Validación y
Producto Mejoras al
Evaluación Producto
resultante
de cada fase resultante
de cada fase

Figura N° 2
Proceso de Desarrollo de Cursos Basados en Web y Proceso de Gestión de Cursos
Basados en Web.
Proceso de Desarrollo de Curso/módulos Basados en Web.
MODULOS Proceso de Gestión de Curso/módulos Basados en Web.
Cada fase requiere de entradas, procesos y salidas bien definidas. Ver figura N° 1 y N° 2.
La instanciación del Proceso de Desarrollo de Cursos continúa con la instanciación de un
Proceso de Gestión de Cursos/módulos, generándose un conjunto de sugerencias de
mejoras que serán utilizadas en el desarrollo del Proceso de Gestión de Cursos/módulos
(iterativo) y de los siguientes Procesos de Desarrollo de Cursos y Procesos de Gestión de
Cursos/módulos (incremental y evolutivo). [MARTINEZ2002b].
Para el Software Engineering Institute (SEI) en el Capability Maturity Model se plantea
que los procesos elaborados deben satisfacer niveles para demostrar la calidad de ese
Sistema de Calidad. Los niveles son: [MCGUIRE1999]
N1: Procesos Impredecibles (tienen un control pobre)
N2: Procesos Repetibles (pueden repetirse los resultados de las actividades).
N3: Procesos Definidos. (son caracterizados pero no completamente entendidos)
N4: Procesos Gerenciándose (son medibles y controlados)
N5: Procesos Mejorándose (tienen metaprocesos de mejoramiento)
Nuestros Procesos de Desarrollo de Cursos Basados en Web son iterativos, incrementales
y evolutivos, son de nivel 5. [MARTINEZ2002b].
Los cuestionarios de evaluación del Proceso de Desarrollo de Cursos Basados en Web se
aplican sobre cada fase del proceso de diseño instruccional: fase de análisis; fase de diseño,
fase de construcción y fase de implantación.
En el cuestionario de evaluación para la fase de análisis se incluyeron preguntas sobre:
Determinar la necesidad instruccional; analizar el currículo determinar el perfil del
egresado; analizar perfiles de cargos en empresas privadas y públicas; analizar plan de
estudios; determinar los objetivos finales (organizacionales, terminales); caracterizar los
tópicos del curso y los objetivos específicos; caracterizar la audiencia a la que va dirigido el
curso (requisitos, conducta de entrada, selección); caracterizar y seleccionar los profesores
del curso; determinar la interacción de los estudiantes y profesores del curso; determinar la
modalidad del curso; estimar tiempo del curso (cronología); definir la distribución
porcentual de la evaluación general; selección del sistema Administrador de Cursos a

utilizar; seleccionar medios de información / comunicación; hacer un presupuesto para el
curso.
En el cuestionario de evaluación para la fase de diseño se incluyeron preguntas sobre:
diseñar la Guía del curso según especificaciones; diseñar módulos internos según
especificaciones; diseñar Documento de fin de curso (Evaluación preliminar del curso.
Evaluación final del curso); elaborar el diseño gráfico del curso (con respecto a la Interfaz
Gráfica; con respecto a la usabilidad; con respecto a la navegabilidad);
En el cuestionario de evaluación para la fase de construcción se incluyeron preguntas
sobre: recopilar material del curso; elaborar contenido del curso; elaborar técnicas de
enseñanza y aprendizaje para las actividades del curso; seleccionar las herramientas de
información según los contenidos; instalar el Sistema Administrador de Cursos para
desarrollo; crear la estructura del curso en Learning Space; transferir los contenidos a
Learning Space; desarrollar el curso basado en Web (guía del curso; módulos internos;
documento de fin de curso); hacer descripción general del curso.
En el cuestionario de evaluación para la fase de implementación se incluyeron
preguntas sobre: instalación del Sistema Administrador de Cursos para producción; hacer
copia de seguridad; instalación del curso; creación de password de acceso; entrenamiento a
los instructores; creación de un manual para los alumnos; dar apoyo a los usuarios.
Actividades de evaluación de la calidad del Proceso de curso (proceso de gestión de la
instrucción)
Para la elaboración del Proceso de Gestión de Cursos se diseño la siguiente estructura:
una Guía del curso, 12 +/- 2 módulos para el contenido y un Documento de fin del curso.
[MARTINEZ2002c].
- Estructura de la Guía del curso:
Presentación. Objetivo terminal; profesores, requisitos; nota informativa; modalidad del
curso; evaluación; proyecto; bibliografía; learning Space; sugerencias de mejoras
(evaluación).
- Estructura de cada Módulo del curso:
Objetivo específico; nota Informativa; marco conceptual; ejemplos; actividades;
evaluaciones; etapas del proyecto; anexos; preguntas frecuentes; bibliografía; sugerencias
de mejoras (evaluación).
- Estructura del Documento de fin de curso:
- Evaluación preliminar del curso; evaluación final del curso.
Con el fin de evaluar las actividades del proceso de cursos utilizamos los dos primeros
niveles del modelo de Donand Kickpatrick [KIRKPATRICK2000], es decir, nivel reactivo
y nivel de aprendizaje, y dejamos para futuras investigaciones los otros dos niveles (nivel
comportamiento y nivel resultados).

En el nivel reactivo se mide la satisfacción de los estudiantes, pero lo aplicamos a todo el
grupo de trabajo. Las encuestas se caracterizan por:
- Medir 7 áreas del curso.
- Ser electrónicas.
- Ser anónimas para los estudiantes (y se les pide honestidad)
- Tener preguntas de selección y de formato abierto
- Ser aplicadas dos veces
- encuesta preliminar a mediados del curso
- encuesta final al terminar el curso
- Tener sólo valor estadístico
- Tener un estándar de encuestas para todos los cursos
- Medir un estándar de Cursos Basados en Web
En el nivel de aprendizaje se mide:
- Aprendizaje de los estudiantes en cuanto al incremento de conocimiento en el área de
Sistemas de Información.
- Desarrollo de habilidades de análisis, diseño y construcción de Sistemas de Información.
- Actitud en cuanto a la capacidad de realizar proyectos de Sistemas de Información en
grupos.
Para medir el nivel de aprendizaje (logro de los objetivos instruccionales de cada módulo
y del curso) aplicamos una estrategia de evaluación continua, con exámenes, debates,
proyectos, casos de estudio y portafolios a lo largo de cada curso. No usamos grupos de
control (experimental), ni evaluaciones previas dado que: a).- los estudiantes que se
inscriben deben poseer (cumplir) una conducta de entrada establecida (se parte de un perfil
de ingreso homogéneo), b).- el conocimiento impartido es nuevo.
Para la aplicación de los dos niveles (nivel reactivo, nivel aprendizaje), se realizaron las
siguientes actividades:
- Encuestas a los grupos de trabajo.
- Aseguramiento del cumplimiento de las estrategias de evaluación.
- Revisión de los resultados de las evaluaciones de efectividad instruccional.
Encuestas a los grupos de trabajo
Las encuestas se aplicaron a todos los grupos de trabajo (estudiantes; profesores;
coordinadores; soporte Técnico) para medir los Procesos de Gestión de Cursos desde todos
los puntos de vista.
Las encuestas de evaluación del Proceso de Gestión de Cursos tienen preguntas con
varias opciones de respuestas (Muy Deficiente; deficiente; regular; bueno; excelente) y
abarcan 7 áreas. Se dejó el área 8 con un conjunto de preguntas de respuesta abierta (para
explicar las respuestas de las 7 áreas):

Las encuestas incluyeron preguntas sobre.
Área 1: Curso en General y sus objetivos. El grado de aplicación futura, por el
participante, de los conocimientos y habilidades adquiridas durante el curso; el grado de
cumplimiento de los objetivos del curso; la capacidad del curso para despertar interés por la
materia; la modalidad a distancia de curso.
Área 2: Coordinación del Programa. El trato de parte del personal de la coordinación; la
organización general del curso por parte de la coordinación; la coordinación, supervisión y
control de las actividades.
Área 3: Soporte Técnico. El ambiente de red y el servicio de Internet; el apoyo técnico
brindado por el personal de Soporte Técnico; la información e instalación del software o
hardware necesarios para visualizar partes del curso; los tiempos de respuesta y de acceso
al curso.
Área 4: Recursos / medios e Interfase. La utilización de los gráficos y dibujos
(ubicación, tamaño, presentación); la utilización de videos y sonidos (ubicación, duración,
resolución); la utilización de los textos (redacción, dimensión, contenidos); la reacción a la
interfaz del curso (Tipos / tamaño de letras, colores, navegadores, titulos/resaltes,
frame/scroll, llamadas, seguimiento); como cataloga el uso de enlaces, anclas o hyper
vínculo dentro del curso; el Sistema Administrador de Cursos (Learning Space) utilizado.
Área 5: Actuación del Docente. El nivel de conocimiento de la materia demostrado por el
docente; la disposición para contestar preguntas y atender consultas por los docentes; la
capacidad de conducir grupos de trabajo por el docente; el nivel de conocimiento sobre el
Sistemas Administrador de Cursos (Learning Space) por el docente.
Área 6: Comportamiento de los Participantes. La socialización entre los participantes; el
trabajo en equipo; la puntualidad mostrada por los demás participantes; el grado de
participación de los demás participantes al curso.
Área 7: Metodología / estrategias instruccionales utilizadas. Las actividades pre-
instruccionales desarrolladas a lo largo del curso (Motivación, presentación de objetivos,
activación de aprendizajes previos); las actividades post-instruccionales desarrolladas a lo
largo del curso (Acciones remédiales y complementarias); las actividades co-
instruccionales desarrolladas a lo largo del curso (Presentación del contenido; ejemplos,
ejercicios prácticos y retroalimentación); el esquema o la estrategia instruccional; la
cronología del curso (de todas las actividades); la duración en horas del curso se ajusta a los
objetivos instruccionales; el sistema de evaluación aplicado; el monitorear el avance del
aprendizaje del estudiante.

Área 8: Aportes. Sugerencias para mejorar el curso (aspectos a incorporar, eliminar o
modificar, tales como recursos, actividades, medios); aspectos más importantes del curso;
plan personal (u organizacional) de desarrollo profesional; comentarios libres.
Aseguramiento del cumplimiento de las estrategias de evaluación
Para la evaluación de la efectividad instruccional se elabora un conjunto de actividades
que deben realizar los estudiantes y luego se obtienen los resultados de las notas dadas por
el profesor.
Se resume las notas de las actividades que realizan los estudiantes:
- realizar una consulta, un debate, un examen y unas sugerencias de mejoras por
participante y por módulo en forma obligatoria (Nota del 25%).
- entregar un caso de estudio resuelto por grupo y por módulo (por semana) más
asignaciones de intercambios de habilidades sobre casos prácticos. (Nota de 35%).
- entregar y defender un proyecto (en etapas con portafolio) por grupo y por cursos, ante un
jurado (Nota del 40%).
Revisión de los resultados de las evaluaciones de efectividad instruccional.
Se analizaron estadísticamente las notas obtenidas por los estudiantes, buscando patrones
de conducta que ayudarán a mejorar la efectividad de los Cursos Basados en Web.
Actividades de evaluación del Sistema Administrador de Cursos
Usamos el método elaborado por el Dr. Bruce Landon del Douglas College, New
Westminter, B.C, como parte de un proyecto de investigación liderado por el Standing
Committee on Educational Technology, Centre for Curriculum Transfer and Technology,
Office of Learning Technology y The Center for Learning Technologies en Mount Allison
University Canadá, en 1996. [LANDON99], [DE BENITO2000].
Le agregamos al método algunas particularidades al caso Venezolano. [ARMIJO2001] y
lo aplicamos sobre un conjunto de Sistemas Administradores de Cursos (Learning Space,
WebCt, Blackboard y CBTCampus).
El método busca verificar la existencia de herramientas del estudiante, herramientas de
soporte y una configuración técnica:
- Herramientas del estudiante como: Búsqueda en la Web (Acceso para personas
discapacitadas, Bookmarks, Multimedia, Seguridad);
enlace asincrónico (Correo electrónico/email, BBS_file_exchange, grupos de noticias
• );
enlace sincrónico (
• Conferencia electrónica (chat),
• Conferencia electrónica de voz (chat de voz), Pizarra (whiteboard); aplicaciones
compartidas; grupo de búsqueda; teleconferencia; videoconferencia); herramientas del

alumno (Auto evaluación; monitoreo del progreso; búsqueda; propiciar la motivación;
preparación de las destrezas de estudio)
- Herramientas de soporte como: Cursos (planeamiento del curso, manejo del curso,
personalización del curso, monitoreo del curso); lecciones (Diseño instruccional,
presentación de la información, examen); datos (marcación en línea, manejo de registros,
análisis y monitoreo); recursos (manejo del currículo, preparación del conocimiento,
creación del equipo); administración (instalación, autorización, registro, manejo de tarifas
en línea, seguridad del servidor, recursos de monitoreo, acceso remoto, recuperación de
fallas); escritorio de ayuda (soporte al estudiante; soporte al instructor).
- Información Técnica como: características del servidor (RAM, espacio en disco, servidor
Window NT, servidor Apple, servidor unix); características del cliente (Nivel meta, precio,
costo de mantenimiento); capacidad del Sistema Administrador de Cursos (número de
cursos, número de estudiantes, número de conexiones, número de instructores).
Adicionalmente, agregamos los siguientes elementos específicos para nuestro caso:
- Cumplimiento de normativas y lineamientos (IMS, AICC); soporte técnico (en Venezuela)
• ; estándares de programación y conectividad (HTML, ODBC, SQL, Java, CORBA,
IIOP, XML); base de datos requerida. Calendario; glosario; anotación: compatibilidad
entre Sistemas Administradores de Cursos.
Decisiones
Las decisiones son recomendaciones y sugerencias, producto de los resultados y
experiencias, para hacer los cambios que los Cursos Basados en Web requieren para llevar a
cabo un mejoramiento en el aprendizaje de los alumnos del área de Sistemas de
Información.
Para el estudio se analizaron cinco Cursos basados en Web (3 materias) del área de
Sistemas de Información: 2 de Análisis de Sistemas de Información, 2 de Diseño de
Sistemas de Información y 1 de Construcción de Sistemas de Información. Así, tenemos: 9
cuestionarios de evaluación de desarrollo de cursos (sobre los 3 cursos desarrollados, años
2001, 2002); 22 encuestas de evaluación final de gestión. (Sobre 5 cursos, año 2003); 25
encuestas de evaluación preliminar (sobre 5 cursos, año 2003). 4 cuestionarios de
evaluación de Sistemas Administradores de Cursos (4 personas que administran los
respectivos Sistemas Administradores de Cursos: LearningSpace, Blackboard, WebCT,
CBTcampus/Smartforce).
Los resultados y experiencias las clasificaremos en tres áreas:
A- Proceso de Desarrollo de Cursos Basados en Web.
B- Proceso de Gestión de Cursos.
C- Sistema Administrador de Cursos.

A.- Proceso de Desarrollo de Cursos Basados en Web.
- Se evidenció la existencia de un proceso de desarrollo repetible, definido,
gerenciado y mejorable; lo cual corresponde con un proceso de nivel 5 según el SEI.
[MCGUIRE1999]. Cada aplicación del proceso de desarrollo se usa para mejorar la
siguiente aplicación; hay una documentación del proceso de desarrollo; las
variaciones de una aplicación a otra son reducidas, lo que implica que el proceso se
está estandarizando.
B.- Proceso de Gestión de Cursos.
- Se evidenció la existencia de un proceso instruccional repetible, definido,
gerenciado y mejorable (todos los cursos son similares y evolucionan con las
sugerencias de mejoras presentadas en cualquiera de los cursos).
- Para que los estudiantes mejoraran su nivel de aprendizaje con respecto a los
objetivos se tienen definidas actividades remediales como:
- Realización de investigaciones particulares sobre el módulo en cuestión.
- Explicación de las respuestas de cada evaluación.
- Re-realización de las actividades, con prórrogas.
- En cuanto a la efectividad instruccional, el promedio de notas pasó de nota: 14.83
en el 2do periodo del 2000 con un enfoque presencial (ver tabla N° 1) a nota:16.31
en el 1ro del 2002 y nota:16.64 en el 2do del 2002 con un enfoque a distancia (ver
tabla N° 2), con un porcentaje de aprobación que mejora con cada cohorte (%
aprobados por inscritos:100%). El porcentaje de estudiantes retirados en muy bajo.
Tabla N° 1
Cursos con un enfoque presencial
Semestre 2do. 2000
Asignatura Inscrit Retir Curs Aprob % Aprob Re % Rep Nota
ANALISIS DE SIS DE o
22 2 a
20 19 95.00 p
1 5.00 16.63
INFORMACION
DISEÑO DE SIST DE 21 2 19 17 89.47 2 10.53 13.88
INFORMACION
CONST DE SIST DE 16 3 13 10 76.92 3 23.08 14.00
INFORMACION
Tabla N° 2
Cursos con un enfoque a distancia
Semestre 1ro. 2001
Asignatura Inscrit Retir Curs Aprob % Aprob Re % Rep Nota
ANALISIS DE SIS DE o
25 1 a
24 23 95.83 p
1 4.17 17.00
INFORMACION
DISEÑO DE SIST DE 14 5 9 9 100.00 0 0.00 14.11
INFORMACION
CONST DE SIST DE 11 1 10 10 100.00 0 0.00 18.00
INFORMACION Semestre 2do. 2001
Asignatura Inscrit Retir Curs Aprob % Aprob Re % Rep Nota
ANALISIS DE SIS DE o
23 0 a
23 20 86.96 p
3 13.04 17.30
INFORMACION
DISEÑO DE SIST DE 25 1 24 20 83.33 4 16.67 14.80
INFORMACION
CONST DE SIST DE 11 0 11 11 100.00 0 0.00 17.91
INFORMACION Semestre 1ro. 2002
Asignatura Inscrit Retir Curs Aprob % Aprob Re % Rep Nota
o a p

ANALISIS DE SIS DE 24 2 22 22 100.00 0 0.00 17.48
INFORMACION
DISEÑO DE SIST DE 11 2 9 9 100.00 0 0.00 15.11
INFORMACION
CONST DE SIST DE 11 2 9 9 100.00 0 0.00 16.33
INFORMACION Semestre 2do. 2002
Asignatura Inscrit Retir Curs Aprob % Aprob Re % Rep Nota
ANALISIS DE SIS DE o
22 1 a
21 21 100.00 p
0 100.00 16.80
INFORMACION
DISEÑO DE SIST DE 22 2 20 20 100.00 0 100.00 16.62
INFORMACION
CONST DE SIST DE 7 1 6 6 100.00 0 100.00 16.50
INFORMACION
- Se informa a los grupos de trabajo (alumnos, profesores, servicio técnico y coordinadores)
sobre los resultados de las encuestas por área:
Tabla N° 3
Resultados de la Encuesta Preliminar
Área 1: Curso en General y sus objetivos. 06 E. 75 B. 31 R. 03 D. 03 M..
Área 2: Coordinación del Programa. 19 E. 45 B. 13 R. 04 D. 00 M
Área 3: Soporte Técnico. 07 E. 56 B. 63 R. 22 D. 10 M.
Área 4: Recursos / medios e Interfase. 16 E. 80 B. 43 R. 08 D. 03 M.
Área 5: Actuación del Docente. 58 E. 55 B. 07 R. 01 D. 00 M.
Área 6: Comportamiento de los 15 E. 91 B. 44 R. 05 D. 03 M.
Participantes.
Área 7: Metodología / estrategias 21 E. 159B. 53 R. 09 D. 01 M.
instruccionales utilizadas.
Tabla N° 4
Resultados de la Encuesta Final
Área 1: Curso en General y sus objetivos. 15 E. 44 B. 24 R. 04 D. 01 M.
Área 2: Coordinación del Programa. 11 E. 31 B. 19 R. 04 D. 01 M.
Área 3: Soporte Técnico. 03 E. 24 B. 40 R. 15 D. 06 M.
Área 4: Recursos / medios e Interfase. 23 E. 64 B. 33 R. 10 D. 02 M.
Área 5: Actuación del Docente. 37 E. 42 B. 08 R. 01 D. 00 M.
Área 6: Comportamiento de los Participantes. 12 E. 31 B. 29 R. 12 D. 04 M.
Área 7: Metodología / estrategias instruccionales 25 E. 97 B. 42 R. 10 D. 00 M.
utilizadas.
Tabla N° 5
Resultados de las Preguntas Abiertas
Área 8 de aportes los estudiantes. Las sugerencias más nombradas son:
- Ubicar el servidor de los cursos en una dirección de más rápido acceso.
- Incorporar más ejemplos en algunos módulos.
- Colocar todo el material en un solo documento para impresión.
- Experiencia positiva. (se aprende)
- Se observa en las tablas N° 3, N° 4, y N° 5 los resultados de las encuestas por cada área
de los Cursos Basados en Web del 2do semestre del 2002. Hay un sesgo hacia valores de

excelente y bueno. Siendo el área 3, de soporte técnico, la excepción.
C.- Sistema Administrador de Cursos.
- El Sistema Administrador de Cursos usado es Learning Space 3.5 dado que
cumple con los requerimientos básicos para el desarrollo y gestión de los Cursos
Basados en Web de Sistemas de Información. (el personal del laboratorio tenía
experiencia en el uso de productos Lotus).
- Dado los servicios que soporta la nueva versión de Learning Space, se sugiere
comenzar un proyecto para cambiar los cursos a la nueva versión.
Conclusiones
- Los Cursos Basados en Web de Sistemas de Información son evaluados para
satisfacer criterios de eficacia, eficiencia y pertinencia. Sus valores de eficacia,
eficiencia y pertinencia según los resultados de las encuestas son sesgados hacia
excelente y bueno en la mayoría de las áreas evaluadas..
- La investigación sobre la evaluación de los Cursos Basados en Web, en el
Laboratorio de Groupware, sigue dos tendencias con sus respectivos proyectos de
investigación: proyecto sobre elaboración de un modelo formal de evaluación de
Cursos Basados en Web y proyecto sobre evaluación de Sistemas Administradores
de Cursos.
- Hay una mejoría en la nota final de los alumnos con el uso de los Cursos Basados
en Web en comparación con el uso de los cursos presenciales.
Referencias
- Alonso C. (200). Curso Automatizado en Web de Diseño de Sistemas de Información.
Universidad Central de Venezuela. T.E.G. Tutor: Fernando Martínez.
- Armijo, Z., R. (2001). Sistemas Manejadores de Cursos: Casos Venezuela. Universidad
Central de Venezuela. 2001. T.E.G. Tutor: Fernando Martínez.
- De Benito, B. (2000). Posibilidades Educativas de las Webtools. España: Universitat de
les IIIes Baleares.
- Clifton, B. C. y Nelson, R. (1999). Evaluación Formativa para el Docente. Paidos.
- Conrad, K. y TrainingLink. (2000). Instructional Design for Web-Based Training
HRD Press.
- Guía (1994). COVENIN 9000-3:1994. Gestión de Aseguramiento de Calidad. 1994.
- Dick, W. y Carey, L. (2001). The Systematic Design of Instruction. USA: Addison-
Wesley.

- Dorrego, E. y Garcia, A. (1991). Dos modelos para la Producción y Evaluación de
Materiales. Universidad Central de Venezuela.
- Gagné, R. (1985). Conditions of Learning. Holt, Rinehart and Winston.
- Gagné, R, Briggs, L. Wager, W. (1992). Principles of Instructional Design. USA: Holt,
Rinehart and Winston.
- Gabinete de Tele-Educación (GATE) de la Universidad Politécnica de Madrid (UPM).
(2002). Asignaturas de libre elección mediante tele-enseñanza en la UPM. Primer semestre
2001-2002
- Horton, W. (2000). Designing Web-Based Training. USA: John Wiley & Sons.
- International Standards Organization. (1999). www.iso.ch
- Institute of Electrical and Electronic Engineers. (1999). www.standars.ieee.org
- Kicrkpatrick, D. (2000). Evaluating Training Programs: The four Levels Training
Conference. Atlanta.
- Landon B. (1999). British Columbia's Centre for Curriculum, Transfer & Technology.
http://www.edutools.info/course/compare/all.jsp
- Lotus Development Corporation. (2000). LearningSpace: Guia del Instructor 3.5;
- Martínez F. (2001). Proceso de Diseño instruccional de cursos y Proceso de cursos.
Centro de Sistemas de Información, Universidad Central de Venezuela.
- Martínez F. (2002 a). Cursos Basados en Web de Sistemas de Información. II Congreso
Internacional de Tecnología y Educación. Caracas Venezuela. Octubre.
- Martínez F. (2002 b). Modelo de Diseño instruccional para Cursos de Sistemas de
Información Basados en Web con un Sistema Administrador de Cursos. Conferencia
Iberoamericana en Sistemas, Cibernética e Informática. Orlando, EEUU. Julio.
- Martínez F. (2002 c). Web-Based Information System Course with Learning Management
System. World Multiconference on Systemics, Cybernetics and Informatics. Orlando, USA.
Julio.
- McGuire,E. (1999). Modelos para la Certificación de Calidad en el Desarrollo del
Software. Seminario. Centro de Automatización Industrial. Universidad Simón Bolívar
- Rickelman, C. y Barron, A. (2001). Web-based Tools and Techniques for Online Courses
Training Conference Atlanta.

- Rodríguez, J. (2001). Curso a Distancia basado en Web: Materia Análisis de Sistemas de
Información. Universidad Central de Venezuela. T.E.G. Tutor: Fernando Martínez.
- Schweizer, H. (2000). Designing and Teaching an On-Line Course. Marquette University.
Allyn and Bacon.
- Simonson, M. y Otros. (1999). Teaching and Learning at a Distance. USA: Prentice Hall.