Diseño de un modelo de evaluación de entornos virtuales de enseñanza y aprendizaje basado en ...

349 Pages·2013·4.26 MB·Spanish

UNIVERSIDAD NACIONAL DE LA PLATA

Facultad de Informática

Diseño de un modelo de evaluación
de entornos virtuales de enseñanza
y aprendizaje basado en la
usabilidad

Autor: Lic. Ariel Ferreira Szpiniak

Director: Dra. Cecilia V. Sanz

Tesis presentada para obtener el grado de Magister en Tecnología Informática
Aplicada en Educación
Facultad de Informática - Universidad Nacional de La Plata

Febrero 2013

Resumen
El impacto de las Tecnologías de la Información y la Comunicación a nivel social, y sus
múltiples posibilidades de integración en la educación, han permitido desarrollar gran
cantidad de espacios virtuales, con la intensión de favorecer los procesos de enseñanza y
aprendizaje mediados por tecnología. Los Entornos Virtuales de Enseñanza y Aprendizaje
(EVEA) surgieron dentro de este ámbito con el objetivo de integrar los principales
servicios de Internet, y proveer recursos para facilitar la interacción entre docentes,
alumnos y materiales de aprendizaje. Para poder analizar las ventajas y desventajas que
cada EVEA posee, de acuerdo al contexto donde se los desee aplicar, es necesario
evaluarlos de alguna manera. La mayoría de los modelos de evaluación analizados,
previo y durante el desarrollo de este trabajo, evalúan los EVEA desde le punto de vista
funcional. En general, el usuario final no participa del proceso, y no se tiene en cuenta la
forma en que cada uno de los usuarios toma contacto con las funcionalidades del EVEA
para realizar las tareas necesarias, y así poder satisfacer sus objetivos.
Por este motivo, la intensión es proponer un modelo que posibilite evaluar la calidad de
los EVEA, considerando como eje central a la usabilidad. El énfasis puesto en la
usabilidad se debe fundamentalmente a su creciente importancia dentro de la calidad de
los productos Web. El modelo se denomina MUsa, dado que se trata de un Modelo
basado en la Usabilidad, y está orientado hacia una evaluación de productos en uso. La
evaluación se realiza mediante escenarios reales de uso, teniendo especial consideración
por los alumnos y docentes, los objetivos que se proponen, las tareas específicas que
realizan durante las actividades de enseñanza y aprendizaje, el equipamiento e
infraestructura que disponen, el lugar físico donde habitualmente se desenvuelven, y el
entorno social en el cual están insertos. Las ideas generales de MUsa están basadas en
una estrategia de cuatro niveles o capas de evaluación, que parten de lo general para
llegar a lo particular, donde las definiciones de usabilidad, junto con los atributos y las
heurísticas forman el núcleo del modelo.
Para tener dimensión de las cualidades y defectos de MUsa, se lo aplicó sobre un caso
concreto, el EVEA SIAT, desarrollado y utilizado por la Universidad Nacional de Río
Cuarto. El caso de estudio sirvió para realizar un recorrido completo por las cuatro capas
de MUsa, tomar las decisiones correspondientes en cada una de ellas de acuerdo a la
magnitud de la evaluación, tiempo y recursos disponibles, y afrontar una aplicación
efectiva del modelo dentro de un contexto conocido y acotado.
En este informe de tesis se presenta el diseño de MUsa, su aplicación en el caso de
estudio y los resultados obtenidos. Los trabajos a futuro se orientan hacia una revisión de
todo el modelo de evaluación, la mejora del mismo de acuerdo a la información recogida a
partir del caso de estudio, y su efectiva utilización.

Agradecimientos

En primer lugar, nobleza obliga agradecer profundamente a Cecilia, mi directora, sin cuyo
aporte hubiera sido imposible culminar esta tesis. Han pasado muchos años desde que
comenzamos a transitar este camino, con momentos que fueron muy difíciles para ella.
Tan largo se hizo el camino que hubo tiempo para que su familia creciera al ritmo que la
tesis trataba de tomar su rumbo. Sin la dedicación que ella puso en acompañarme,
aconsejarme, responder a mis consultas, y analizar a fondo cada una de las páginas de la
tesis, no estarían leyendo estos agradecimientos.
A mi esposa, Sonia, por permitirme compartir con ella el sueño de formar una familia, por
su ternura, su amor, sus ideales, su empuje. Sos el amor de mi vida y agradezco todos los
días que estés a mi lado.
A mis tres princesas, Agustina, Ailén y Ana Lucía, quienes me llenan de felicidad y orgullo
día tras día. Disfruto al verlas vivir a pleno, haciendo gimnasia, aprendiendo, jugando,
creando, bailando, actuando, brillando como estrellas.
A mis viejos, Beatriz y Víctor, por haberme dado educación y el privilegio de ser su hijo,
porque la lucharon siempre, y me enseñaron los mejores valores del ser humano
predicando con el ejemplo. En especial a mi mamá, por leer más de 300 páginas con un
solo ojo y aportar comentarios para la mejora de la redacción de la tesis.
A mi hermana, Analía, que gracias a su inteligencia y tesón se transformará muy pronto
en flamante Doctora, y excelente investigadora en genética (herencia de sus padres).
A mis compañeros de trabajo por estar siempre ahí, y por darme una mano cuando la
necesité. A los docentes que colaboraron en la revisión de los instrumentos de evaluación
y a los que participaron del caso de estudio. A mi prima Antonella que tradujo fragmentos
de un libro en italiano. A Jordi Adell por responder a mis consultas vía correo electrónico.
A mi querida Universidad, la de Río Cuarto, por ser mi lugar de trabajo y facilitarme el
desarrollo de las tareas de perfeccionamiento.
A la Universidad Nacional de La Plata, lugar de debate, de resistencia, de generación de
conocimiento, de aporte a la sociedad, de la cual han surgido grandes hombres y mujeres
comprometidos con un país para todos. Particularmente a la Facultad de Informática, a
sus directivos, docentes y personal de apoyo, por posibilitarme ser alumno de sus
carreras de posgrado y apoyarme cada vez que los necesité.
A todos los que contribuyen para que tengamos educación gratuita de calidad. ¡Al Gran
Pueblo Argentino, Salud!

Tabla de Contenidos
Capítulo 1: Introducción, motivación, objetivos, estructura de la tesis................................9
1.1 Introducción.................................................................................................................9
1.2 Antecedentes...............................................................................................................9
1.3 Motivación .................................................................................................................11
1.4 Objetivos....................................................................................................................12
1.5 Estructura de la tesis.................................................................................................12
Capítulo 2: Usabilidad.......................................................................................................15
2.1 Introducción...............................................................................................................15
2.2 Un poco de historia....................................................................................................15
2.2.1 Las interfaces gráficas y la Web......................................................................16
2.3 Características vinculadas al software.......................................................................17
2.3.1 Calidad.............................................................................................................17
2.3.2 Aceptabilidad...................................................................................................21
2.3.3 Utilidad.............................................................................................................22
2.4 Usabilidad..................................................................................................................23
2.4.1 Origen..............................................................................................................23
2.4.2 Concepto general.............................................................................................23
2.4.3 Usabilidad versus Calidad en uso....................................................................35
2.4.4 Atributos de la usabilidad.................................................................................36
2.4.5 Importancia de los atributos.............................................................................38
2.4.6 Heurísticas o principios de usabilidad..............................................................39
2.5 Conclusiones.............................................................................................................48
Capítulo 3: Accesibilidad...................................................................................................51
3.1 Introducción...............................................................................................................51
3.2 Discapacidades.........................................................................................................51
3.2.1 Discapacidades visuales..................................................................................52
3.2.2 Discapacidades motrices.................................................................................53
3.2.3 Discapacidades auditivas ................................................................................53
3.2.4 Discapacidades cognitivas y neurológicas.......................................................54
3.3 Derecho a la accesibilidad.........................................................................................54
3.4 Guías y pautas de accesibilidad................................................................................55
3.4.1 ISO/TS 16071..................................................................................................56
3.4.2 Web Accessibility Initiative (WAI).....................................................................56
3.5 Accesibilidad versus Usabilidad ................................................................................57
3.6 Conclusiones.............................................................................................................58
Capítulo 4: Métodos de evaluación de usabilidad.............................................................59
4.1 Evaluación de la usabilidad.......................................................................................59
4.1.1 Clasificación.....................................................................................................59
4.1.2 Lugar de realización de la evaluación..............................................................62
4.1.3 Forma de recabar información.........................................................................63
4.1.4 Implicación de participantes.............................................................................63
4.1.5 Métodos...........................................................................................................63
4.1.6 Medidas de usabilidad.....................................................................................72
4.2 Evaluación de la accesibilidad...................................................................................74
4.2.1 Revisión Automática........................................................................................74
4.2.2 Revisión manual..............................................................................................75
4.3 Conclusiones.............................................................................................................76
Capítulo 5: Entornos Virtuales de Enseñanza y Aprendizaje, y su evaluación................79
5.1 Introducción...............................................................................................................79
5.2 Entornos Virtuales de Enseñanza y Aprendizaje.......................................................80
5.2.1 Clasificación.....................................................................................................83
5.3 Aula Virtual................................................................................................................86
5.4 Tendencias actuales..................................................................................................88
5.5 Análisis de los EVEA. Las diversas miradas .............................................................89
5.5.1 Evaluación de EVEA........................................................................................90
5.6 Conclusiones.............................................................................................................92
Capítulo 6: Métodos, técnicas, herramientas y evaluadores.............................................93
6.1 Métodos de evaluación de usabilidad seleccionados................................................93
6.1.1 Métodos de inspección....................................................................................95
6.1.2 Métodos de indagación..................................................................................106
6.1.3 Métodos de test.............................................................................................108
6.2 Técnicas seleccionadas para considerar en el modelo de evaluación propuesto...110
6.2.1 Cuestionarios.................................................................................................111
6.2.2 Entrevistas.....................................................................................................116
6.2.3 Encuesta........................................................................................................119
6.2.4 Análisis de log................................................................................................122
6.2.5 Seguimiento visual.........................................................................................123
6.3 Herramientas...........................................................................................................125
6.3.1 Usabilidad......................................................................................................125
6.3.2 Accesibilidad..................................................................................................128
6.3.3 Heramientas seleccionadas...........................................................................131
6.4 Evaluadores.............................................................................................................131
6.4.1 Clasificaciones en relación a los evaluadores................................................132
6.4.2 Cantidad de evaluadores...............................................................................134
6.5 Evaluación de producto...........................................................................................135
6.6 Conclusiones...........................................................................................................136
Capítulo 7: MUsa: Modelo centrado en la Usabilidad para evaluación de EVEA....139
7.1 Introducción.............................................................................................................139
7.2 Puntos de partida propuestos para un nuevo modelo de evaluación de EVEA.......139
7.2.1 Primera capa..................................................................................................141
7.2.2 Segunda capa................................................................................................141
7.2.3 Tercera capa..................................................................................................142
7.2.4 Cuarta capa...................................................................................................142
7.2.5 Aplicación de MUsa a distintos contextos......................................................143
7.3 Decisiones respecto a los métodos, técnicas, herramientas y evaluadores............146
7.3.1 Decisiones respecto a los métodos...............................................................146
7.3.2 Revisión respecto a las técnicas....................................................................146
7.3.3 Decisiones respecto a las herramientas........................................................148
7.3.4 Decisiones acerca del tipo de evaluadores....................................................148
7.3.5 Decisiones acerca de la cantidad de evaluadores.........................................149
7.4 Definición de escenarios..........................................................................................151
7.4.1 Personajes.....................................................................................................152
7.4.2 Objetivos........................................................................................................152
7.4.3 Tareas............................................................................................................152
7.4.4 Contexto de uso.............................................................................................154
7.4.5 Escenarios.....................................................................................................154
7.4.6 Síntesis sobre los escenarios........................................................................158
7.5 Desarrollo de MUsa.................................................................................................162
7.5.1 Primera capa..................................................................................................162
7.5.2 Segunda capa................................................................................................170
7.5.3 Tercera capa..................................................................................................183
7.5.4 Cuarta capa...................................................................................................190
7.6 Conclusiones...........................................................................................................196
Capítulo 8: Caso de estudio. Aplicación de MUsa..........................................................199
8.1 Sistema Informático de Apoyo a la Teleformación - SIAT.......................................199
8.1.1 Derechos intelectuales...................................................................................200
8.1.2 Condiciones de utilización..............................................................................200
8.1.3 Evolución del SIAT.........................................................................................201
8.1.4 Evaluación del SIAT.......................................................................................202
8.2 Forma de aplicación del modelo al EVEA SIAT.......................................................203
8.2.1 Introducción...................................................................................................203
8.2.2 Que decisiones se tomaron en los puntos abiertos.......................................203
8.2.3 Cómo se llevó adelante .................................................................................205
8.2.4 Resultados cualitativos obtenidos por capa...................................................210
8.2.5 Problemas, trabas o conflictos.......................................................................228
8.3 Conclusiones...........................................................................................................230
Capítulo 9: Resultados, conclusiones, trabajos futuros..................................................233
9.1 Resultados y conclusiones......................................................................................233
9.2 Trabajos Futuros......................................................................................................236
9.2.1 Grado de usabilidad.......................................................................................236
9.2.2 Ajustes del modelo y análisis por expertos....................................................236
9.2.3 Extender la aplicación del modelo.................................................................237
9.2.4 Tendencias actuales......................................................................................237
Bibliografía......................................................................................................................239
Glosario..........................................................................................................................253
Anexos............................................................................................................................255
12.1 Anexo A...................................................................................................................255
12.1.1 Categorías de análisis ...................................................................................256
12.1.2 Instrumentos de evaluación...........................................................................264
12.2 Anexo B...................................................................................................................279
12.2.1 Identificación de tareas importantes y frecuentes en el EVEA SIAT..............279
12.3 Anexo C...................................................................................................................282
12.3.1 Evaluación de alto nivel orientada a la tarea..................................................282
12.4 Anexo D...................................................................................................................291
12.4.1 Introducción...................................................................................................291
12.4.2 Cuestionario para evaluación en detalle orientada al diseño.........................291
12.5 Anexo F...................................................................................................................297
12.5.1 Introducción...................................................................................................297
12.5.2 Usuarios finales.............................................................................................297