Daniel Torres & David Gago Seminario eMadrid , 17 enero 2014

HACIA UN APRENDIZAJE

ADAPTATIVO: LA EXPERIENCIA

DE CSEV EN LEARNING

ANALYTICS

“La web es sólo la punta del iceberg y llegarán nuevas tecnologías mucho más poderosas que

nos permitirán hacer cosas que jamás hubiéramos imaginado. Lo mejor está por

llegar”. Tim Berners Lee

Movilidad smartphones,

tablets

MOOCsAbiertos,

masivos, online…Gamificación

NUEVOS ESCENARIOS EDUCATIVOS

TECNOLOGÍA

Aprendizaje personalizado y adaptativoRespuesta en tiempo real al desempeño y actividad de cada individuo

en su entorno de aprendizaje, y cuyo resultado es la optimización de los resultados

Flipped Classroom

“Data constitute a vast neutral resource, which promises to be for the 21st Century what steam

power was for the 18th and electricity for the 19th and hydrocarbons for the 20th” Virginia Rometty, CEO

IBM

LA IMPORTANCIA DE MEDIR

“Most great revolutions in science are preceded by revolutions in measurement. (…) That tremendous

improvement in measurement is creating new opportunities to manage things differently”

Erik Brynjolffson, Director del MIT Center for Digital Business

“Today, there´s enough information in the world to give every person alive 320 times as it as historians think it was stored in Alexandria´s entire collection-

and estimated 1,200 exabites worth”K. Cukier, Editor, The Economist

5

• 81.818 petabytes por mes de tráfico de datos fijo en 2017.

• Crecimiento CAGR del 21% entre 2012 y 2017 del tráfico de datos fijo.

• 11.157 petabytes por mes de tráfico de datos móvil en 2017.

• Crecimiento CAGR del 66% entre 2012 y 2017 del tráfico de datos móvil.

• Tardaríamos 5 millones de años en ver todo el vídeo que circulará en la red en 2017.

Fuente: CISCO Visual Network Index e ITU

2012 2013 2014 2015 2016 2017

31,339

39,295

47,987

57,609

68,878

81,818

885 1,578 2,7984,704

7,43711,157

Internet fijo Internet móvil

Previsiones de tráfico fijo y móvil 2012-2017 Datos en Petabytes por mes.

LA “EXPLOSIÓN” DE LOS DATOS

+ datos y + probabilidad de convertir en datos (cifras) cualquier aspecto de la vida)

ANALYTICS 3.0

Analytics 1.0

“business Intelligence

”

• Sistemas de información ad hoc• Data sets limitados: mucho tiempo dedicado a la

preparación de los datos • Explicación de fenómenos (procesos) pasados, nunca

presentes/futuros• Objetivo: mejorar los niveles internos de eficiencia

Analytics 2.0

“big data”

• Data sets más voluminosos • Asociado a la explosión de herramientas de

internet• Análisis de datos no estructurados• Perfiles laborales muy novedosos: data

scientists• Objetivo: ganar ventaja competitiva

Analytics 3.0 “data enriched

offerings”

• Aplicado a todos los sectores/industrias• Multiplicidad de datos:

grandes/pequeños, estructurados/desestructurados: todo bajo un paraguas

• Equipos multidisciplinares• Capacidad de extrapolar/predecir• Objetivo: creación de más valor

LEARNING ANALYTICS

Learning

Analytics

Nuevos contextos educativos

Los datos y su medición como inputs claves del s

XXINuevas

posibilidades

tecnológicas: Analytics

3.0

Las técnicas de Learning Analytics se aplican sobre los datos generados en el contexto de los procesos de aprendizaje.

Pueden aplicarse sobre experiencias de aprendizaje presencial.

Es en el marco del aprendizaje online, donde las posibilidades de recoger datos crecen exponencialmente y puede aprovecharse

todo su potencial.

“Learning Analytics es la medición, recopilación, análisis y presentación de datos sobre los alumnos y

sus contextos, con el propósito de entender y optimizar el aprendizaje y los entornos en que se produce”. George

Siemens

LEARNING ANALYTICS

MATRIZ DE VENTAJAS

Dimensiones para el estudiante

Dimensiones para el docente

Dimensiones para la Universidad

- Progreso en el curso.- Comparativas con compañeros y grupos de alumnos.

- Logros.- Aspectos a mejorar.- Fortalezas.- Debilidades.

- Información sobre estudiantes: Individual y agregada.

- Logros conseguidos en el curso.

- Obstáculos para el progreso de los alumnos.

- Mejoras del propio curso.

- Procesos de tomas de decisiones administrativas y organizativas.

- Mejoras en la transparencia.

- Éxitos.- Desafíos.

DIMENSIONES

Neutralidad de los datos. Los sistemas de información filtran y categorizan el mundo,

generando modelos simplificados. Riesgo de ignorar aspectos importantes.

Perpetuación del modelo de evaluación.

Perspectiva ética y privacidad. Actualidad con el escándalo del espionaje masivo.

“EL LADO OSCURO”

LA EXPERIENCIA DE CSEV EN LEARNING ANALYTICS

Dos aspectos:Orientación estratégica de CSEV hacia el mundo

MOOC

JUSTIFICACIÓN DEL INTERÉS DE CSEV EN LA

Cursos COMA en España: +500.000 participantes en +90 cursos,

acumulando +1.000.000 horas de experiencia de aprendizaje.

Fuente: European MOOC Scoreboard, enero 2014

Dos aspectos:

A día de hoy no existe una herramienta estandarizada para la realización de analíticas en

entornos MOOC (no soluciones globales)Objetivo: Desarrollar una herramienta de LA plenamente operativa en entornos MOOCs, que permita mejorar la experiencia de aprendizaje

(aprendizaje adaptativo) y, en último término, se traduzca en un mayor porcentaje de alumnos que

finalizan MOOCs.

JUSTIFICACIÓN DEL INTERÉS DE CSEV EN LA

EL PRECEDENTE:LEARNOVATION III

Participaron:

• José de la Peña, socio NeoLabels

•Dolors Reig, Psicóloga social y editora

principal de El caparazón

• Erik Duval, Director de Investigación

de la Unidad de Interacción entre

Ordenadores y Personas de la

Universidad Católica de Lovaina,

Bélgica

• Salvador Ros, Universidad Nacional de

Educación a Distancia, UNED

• Tomás Martínez Buero, CEO de

Inkubica Labs.

23 mayo 2013

¿POR DÓNDE HEMOS EMPEZADO?: OPEN MOOC

OPEN MOOC: Plataforma de código abierto para implementar MOOCs.

- Analizar datos y proponer mejorar con objeto de generar métricas válidas para OpenMOOC

- Crear arquitecturas apropiadas para el seguimiento de la información en OpenMOOC en tiempo real (incluyendo Google

Analytics) - Mejorar la plataforma OpenMOOC para hacerla compatible

con los requerimientos LA (crear nueva versión)- Fomento de la difusión científica: publicaciones derivadas de

las conclusiones.

Erik Duval (Universidad de Lovaina).Experto en Learning analytics de talla mundial.

Miembro del Comité Ejecutivo de la Sociedad para la Investigación de Learning Analytics (SOLAR)

CSEV, U. Lovaina, UNED y Deusto ya están trabajando en una solución LA para MOOCs.

+ EdX (estudio de posibles mecanismos de con su

herramienta LA)

Ventajas- Equipo experimentado y reconocido- Solución ya disponible (adaptación al

ámbito MOOC)- Mínimos costes

- CSEV como parte de un ecosistema innovador

- Visibilidad máxima

¿CON QUIÉN TRABAJAMOS?

?

Miembros de SNOLA

Análisis de BBDD y preparación dataset+ elección de preliminar de indicadores y proposición métricas

Diseño back endEstrategia de captura y tratamiento de datos y APIs

Elaboración de cuadro de mando + sistema de recomendación manual y etiquetado de contenidos

Evaluación y difusión

PLAN DE TRABAJO

EXTRAER INFORME COMPLETO

47,4 MAX:100

MODULO 1

MODULO 2

MODULO 3

MODULO 4MODULO 5MODULO 6 55,8 MAX:100

CONTENIDO DEL CURSO

POSTS

RESPUESTAS

COMENTARIOS

VOTOS RECIBIDOS

3

16

0

8VOTOS EMITIDOS 0

ACTIVIDAD EN EL FORO Personal Media

MIN:0 MIN:0

KARMANOTA

PROGRESO DEL CURSO

0% 20% 40% 60% 80% 100%

BADGES

0 4 7

EJEMPLO: CUADRO MANDO DE ALUMNO

0,03

0,11

0,01

0,01

0,03

Oro Plata Bronce

0

500

1000

1500

2000

2500

3000

3500

4000

MODULO 1 MODULO 2 MODULO 3 MODULO 4 MODULO 5

PROGRESO PARTICIPANTES

EXTRAER INFORME COMPLETO

ALUMNOS MATRICULADOS

INICIAN EL CURSO

BADGE DE FINALIZACIÓN

PARTICIPAN EN EL FORO

5.585

3.982

327

775CREDENCIALES EMITIDAS

CERTIFICADOS EMITIDOS

114

7

106 ●0 ●0 ●5Julio Fabián Basoalto

Ranking Karma Medallas

1º

Alfredo Campos García2º 101 ●0 ●3 ●7

Adela Rodriguez Izquierdo3º 91 ●0 ●1 ●6

Ángeles Sanz Vicario4º 91 ●0 ●1 ●6

Silvia Phang Chiong Agreda5º 81 ●0 ●1 ●3

COMUNIDAD DE APRENDIZAJE

1.000

163 ●0 ●3 ●11Beatriz Rodríguez

FACILITADORA

Jose Luis Ruiz de Munain 91 ●0 ●4 ●7CURADOR

13.991 39.875

Actividades P2P

Enviadas Corregidas

143 552

Posts Respuestas

Actividades Foro

EJEMPLO: CUADRO MANDO DOCENTE

EJEMPLO: CUADRO DE MANDO DE LA UNIVERSIDAD

CERTIFICADOS

EVOLUCIÓN DE ACCESOS A LA PLATAFORMA

2.900 166

Credenciales Certificados

3 Julio 2013

DETALLE POR CURSOS

GEOGRAPHICS

Visitas totales

Usuarios Únicos

1.340.836

527.381

Usuarios Registrados 121.999Matriculas en cursos 182.748

Número de cursos 20

11 9

CURSOS

ACTIVOS CERRADOS

8 11

Aprobados Solicitados

NUEVOS CURSOS

DESTACADOS

PRÓXIMOS PASOS

Tener listo un primer cuadro de mando preliminar (recomendación manual) para UNEDCOMA (primer

semestre 2014)Explorar las posibles sinergias con otras plataformas LA (de manera particular, con EdX)

Avanzar en herramientas LA en otros proyectos CSEV: de aprendizaje masivo (UnX, Colmenia) y otros

(ECO) Actividades de difusión:

Organización LASI 2014 en Madrid (30 junio-2 julio 2014)

¡MUCHAS GRACIAS!

 www.csev.org @fcsev

Chad Hagen, Nonsensical Infographicshttp://www.chadhagen.com/Nonsensical-Infographics

ANEXO

ALGUNOS HALLAZGOS PRELIMINARES (I)

Fuente: Santos, J.L.; Duval, E.; Klerkx, J.; Gago, D y L. Rodriguez (2014): “Success, activity and drop-outs in MOOCs. An exploratory study on UNED COMA courses”, LAK 2014, 24-28 de marzo,

Indianápolis, USA

¿influye la estructura del curso en el desempeño del alumno?

ALGUNOS HALLAZGOS PRELIMINARES (II)

Fuente: Santos, J.L.; Duval, E.; Klerkx, J.; Gago, D y L. Rodriguez (2014): “Success, activity and drop-outs in MOOCs. An exploratory study on UNED COMA courses”, LAK 2014, 24-28 de marzo,

Indianápolis, USA

¿Cómo se distribuye temporalmente la carga de trabajo en el curso?

ALGUNOS HALLAZGOS PRELIMINARES (III)

Fuente: Santos, J.L.; Duval, E.; Klerkx, J.; Gago, D y L. Rodriguez (2014): “Success, activity and drop-outs in MOOCs. An exploratory study on UNED COMA courses”, LAK 2014, 24-28 de marzo,

Indianápolis, USA

¿Disminuye significativamente la actividad del foro para los alumnos que aprueban el curso?

ALGUNOS HALLAZGOS PRELIMINARES (IV)

Fuente: Santos, J.L.; Duval, E.; Klerkx, J.; Gago, D y L. Rodriguez (2014): “Success, activity and drop-outs in MOOCs. An exploratory study on UNED COMA courses”, LAK 2014, 24-28 de marzo,

Indianápolis, USA

¿Existe relación entre actividad y desempeño del estudiante?

ALGUNOS HALLAZGOS PRELIMINARES (V)

Fuente: Santos, J.L.; Duval, E.; Klerkx, J.; Gago, D y L. Rodriguez (2014): “Success, activity and drop-outs in MOOCs. An exploratory study on UNED COMA courses”, LAK 2014, 24-28 de marzo,

Indianápolis, USA

¿Hay hilos en el foro que los estudiantes deben leer?

solar

Red de investigadores, internacionalmente destacados, centrados en explorar el rol e impacto de las técnicas de LA en la enseñanza, aprendizaje y formación.

La Misión

Impulsar los más elevados estándares académicos en la investigación de LA.

Promover el desarrollo de los OERs en el campo de LA.

Concienciar sobre la importancia de LA a los responsables de políticas en las instituciones educativas y gobiernos.

Crear oportunidades para los diversos actores en el área de LA (educadores, estudiantes, instituciones, empresas, etc.)

LASI

¿Qué es LASI?

Un instituto de verano intensivo cuyo objetivo es impulsar y acelerar el desarrollo de la disciplina.

Uno de los eventos más prestigiosos en el campo de LA, que reúne a las mentes más reputadas de la especialidad

ObjetivosConstruir el campo de LA a través de interacciones interdisplinares, identificación de las necesidades de enseñanza e investigación y la conexión de investigadores individuales.

Desarrollar el conocimiento y las habilidades de doctorandos y académicos.

FormatoConferencias, grupos de trabajo, tutoriales, talleres, etc, que cuentan con a participación de investigadores líderes, startups, etc.

Paralelamente se desarrollan LASI locales alrededor de todo el mundo.

LASI 2013

¿Dónde? En la Universidad de Stanford.

¿Cuándo? Del 1 al 5 de Julio de 2013.

¿Quién participó? George Siemens, Dragan Gasevic, Erik Duval, Abelardo Pardo, John Berens...

¿Quién patrocinó?

LASI 2014

La oportunidad

Fruto de la colaboración de CSEV con Erik Duval (U. de Lovaina) en proyectos de LA, ha surgido la oportunidad de celebrar el LASI 2014 en Madrid

¿Por qué?

Continuar impulsando el desarrollo de LA.

Conocer de primera mano los últimos desarrollos en este campo.

Nuevas oportunidades de colaboración con líderes destacados del campo.

Posicionamiento y visibilidad para los Patronos de CSEV en un área prioritaria para la educación y los proyectos que desarrollan: Miriada X, unX, UNED COMA.