Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis...

20
CASO DE ESTUDIO DE: EVALTIS MARCO DE REFERENCIA PARA LA EVALUACIÓN DEL DESEMPEÑO DE LOS SERVICIOS T-LEARNING SOBRE DVB-T. PhD. Jose Luis Arciniegas Herrera [email protected] Ing. Gineth Magaly Cerón [email protected]

Transcript of Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis...

Page 1: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

CASO DE ESTUDIO DE: EVALTIS MARCO DE REFERENCIA PARA LA EVALUACIÓN DEL DESEMPEÑO DE

LOS SERVICIOS T-LEARNING SOBRE DVB-T.

PhD. Jose Luis Arciniegas Herrera

[email protected]

Ing. Gineth Magaly Cerón

[email protected]

Page 2: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Agenda

Contexto

Objetivos Generales EVALTIS

Resultados

Conclusiones

Trabajos Futuros

Page 3: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas
Page 4: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Popayán - Colombia 1537

Page 5: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Proyectos realizados y

experiencias obtenidas

– EDiTV

– STCAV

– GESTV

– UsabiliTV

– Solite

– RedAUTI

Page 6: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

iTV E-learning

Page 7: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

• Objetivo general

– Apoyar procesos educativos a distancia en el programa

de Tecnología Agroindustrial ofrecido por la Universidad

del Cauca a través del uso de educación virtual

soportada en tecnologías de Televisión Interactiva

• Objetivos específicos

– Generar un modelo de referencia básico

– Generar una infraestructura de red

– Diseñar e implementar contenidos

– Criterios pedagógicos.

– Principios pedagógicos.

– Utilizar RENATA

2007-2009

Page 8: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

• Objetivo general

– Construir y desarrollar servicios de soporte para conformación de

una Comunidad Académica Virtual (CAV) a través de la

integración de la TDi y la web

• Objetivos específicos

– Generar un modelo de referencia para la creación de una CAV.

– Proponer, desarrollar y desplegar un conjunto de servicios.

– Validar los servicios utilizando una CAV piloto en un escenario de

prueba real

– Construir y validar las estrategias pedagógicas para la

consolidación de una CAV.

2009-2012

ST-CAV: Servicios de T-learning para el

soporte de una Comunidad Académica Virtual

Page 9: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

• Objetivo general

– Proponer y construir una plataforma de gestión de red y servicios

para un sistema de soporte de procesos educativos que usan

como medio la Televisión Digital Interactiva.

• Objetivos específicos

– Analizar los modelos de gestión de red.

– Proponer una arquitectura de gestión.

– Construir un prototipo de la arquitectura de gestión

– Realizar un caso de estudio. Este caso de estudio estará

enmarcado en el contexto específico del T-Learning.

2012-2014

Plataforma de Gestión para un Sistema de T-

learning

Page 10: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

• Objetivo general

– Desarrollar un entorno computacional colaborativo para la

evaluación de la usabilidad de los servicios que soportan

procesos educativos en entornos de TDi.

– Objetivos específicos

– Adaptar métodos colaborativos que permitan evaluar la

usabilidad

– Desarrollar una herramienta que implemente los métodos

propuestos

– Realizar casos de estudio.

– Generar un conjunto de lineamientos de Usabilidad

2013-2015

Framework para la evaluación desde la perspectiva de

usabilidad de los servicios para soportar procesos

educativos en entornos de televisión digital interactiva.

Page 11: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

• Marco de referencia para evaluar la usabilidad en servicios de T-learning (Andrés F. Solano A.)

• Proceso de adaptación de contenidos interactivos de televisión digital fija a entornos móviles (Claudia P. Acevedo)

• Marco de Referencia para la evaluación de desempeño de servicios T-learning en TDi (Gineth M. Cerón R.)

• Arquitectura para el Despliegue del Servicio de VoD de IPTV, apoyado en Interactividad y Sistemas de Recomendaciones TDi (Diego F. Durán D.)

• Charging en Sistemas IPTV en entornos convergentes (Mary C. Carrascal R.)

• Esquema de metadatos para la interconexión de contenidos educativos de IPTV y de la web (Ángela M. Vargas A.)

Page 12: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Contexto

EVALTIS, Integra evaluación de calidad Software y QoS. Con el

fin de evaluar Servicios T-Learning sobre DVB-T

Calidad de

Software

ISO 25010

Calidad de

Servicio

QoS

Evaluación

de Servicios

T-Learning

Page 13: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Objetivos generales de EVALTIS

Page 14: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Escenario de pruebas

Cuatro puntos clave para evaluar recursos dentro de la

arquitectura general para despliegue de servicios T-Learning.

Page 15: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Resultados Carrusel

Prueba Resultados

Número de aplicaciones

que soporta

simultáneamente

•En base a la bit rate de 13271000, podría decirse que número de

aplicaciones no hay definido, sino hasta que se ocupe toda esta

capacidad, claro restando el tamaños de las tablas PID, PTM etc.

•Se probaron varias aplicaciones de diferentes tamaños y el único

problema es que al iniciarse la aplicación se demora un tiempo superior

a 10 seg esperando que carguen todas.

•Se probó en diferentes carruseles y solo soporto tres aplicaciones como

se muestra en la Fig 3, pero en solo dos carruseles en el primero se

subio una y en el otro dos.

Tamaño de la aplicación El tamaño máximo depende de la bit rate si solo es una aplicación

podría usar casi todos los 13Mb.

Fig.3

Page 16: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Resultados QoE servicios T-Learning

EPG

Gestión de perfil

Chat

Prueba Resultados

Tiempos

de

respuesta

•El chat es el que responde más rápido aprox =

3,4 seg

•La EPG y el perfil, depende de cuantas

imágenes se cargan según la actividad del

usuario. Es por eso que en promedio se tiene

EPG> 5seg y Perfil > 4seg.

•Una solución para la EPG es guardarla en el

STB y que cargue solo actualización de datos que

viene por el canal de retorno. Sin embargo no se

puede probar porque se necesita permisos de

fabrica del STB.

Número

de

peticiones

•Chat= hasta 5 peticiones seguidas.

•EPG= debe esperar a que cargue la primera y

toma la siguiente petición.

•Gestión del perfil igual a la EPG.

Page 17: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Conclusiones

1. Se puede optimizar el carrusel de objetos, organizando y

agrupando las aplicaciones, tablas y número de carruseles a

usar.

2. Aunque el carrusel de objetos tiene sus limitaciones de

capacidad, es perfecto para trabajar con eventos sincrónicos,

como es el caso de Teletexto o modificación de parámetros en

tiempo real.

3. Para el manejo de múltiples peticiones de los usuarios es

mejor realizarlo a través del canal de retorno.

Page 18: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Trabajos Futuros

1. Ampliar el marco de referencia EVALTIS para todo tipo de

servicios interactivos en DVB-T y otros estándares TDi.

2. Realizar una aplicación ya sea de escritorio, web o sobre

televisión, que permita evaluar todos los aspectos de

EVALTIS, de una forma amigable y que entregue los

resultados de ella.

3. Realizar un marco de referencia que adapte los estándares de

mejora de procesos a los servicios interactivos en TDi.

4. Realizar un marco de referencia para evaluar servicios TDi en

dispositivos móviles.

Page 19: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

Referencias

1. Imran. Kashif, "Mesurement of multicast Television over IP," 15 th IEEE Workshop on

local and metropolitan Area Networks 2007, 2007.

2. Y. W. Jinyun Zhang, Bo Rong " QoS/QoE techniques for IPTV transmissions”.

Mitsubishi electric research laboratories, 2009.

3. Rodriguez-Alsina, "Interactive TV Application Design Convergence Across Formats

and Devices," 2009.

4. Cauca, U. d. (2007-2010). "Educación Virtual en Televisión Digital Interactiva para

apoyar procesos educativos a distancia." Disponible en:

http://www.unicauca.edu.co/EDiTV.

5. L. Arciniegas, A.García, “Servicios de T-learning para el soporte de una Comunidad

Académica Virtual (ST-CAV)”, realizado por las universidades: Universidad del Cauca,

Universidad Autónoma de Occidente y la Universidad de Oviedo (España). D. Project.

6. TIQUE, Johan E, ZEMANATE, Gaby, CARRASCAL, Mary, ARCINIEGAS, José L.

Comunidades académicas virtuales en entornos de Televisión Digital Interactiva.

http://sedici.unlp.edu.ar/bitstream/handle/10915/25949/Documento_completo.pdf?seque

nce=1

7. G. Magaly Cerón Rios and J. L. A. Herrera, “Performance analysis of dttv with return

channel ip in ns2," in Communications Conference (COLCOM), 2012 IEEE Colombian,

pp. 1-6, 2012.

http://ieeexplore.ieee.org/search/searchresult.jsp?newsearch=true&queryText=A+IP+en+

NS2&x=-878&y=-177.

8. Dektec, \Moduladora 110t," 2005. http://www.dektec.com/products/PCI/DTA-

110T/Downloads/DTA-110T.pdf.

Page 20: Marco de referencia para la evaluación del desempeño de los servicios t-Learning - Jose Luis Arciniegas

PhD. Jose Luis Arciniegas Herrera

[email protected]

Ing. Gineth Magaly Cerón

[email protected]