Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas...

69
Minería Visual de Grandes Volúmenes de Información Dr. Alfredo Sánchez http://ict.udlap.mx Universidad de las Américas Puebla Fecha

Transcript of Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas...

Page 1: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Minería Visual de Grandes Volúmenes

de Información Dr. Alfredo Sánchez

http://ict.udlap.mx

Universidad de las Américas Puebla

Fecha

Page 2: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Temáticas de Interacción Humano-Computadora

Page 3: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Comunidad CUDI de Interacción Humano-Computadora

Page 4: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Participantes - Taller IHC 2013

1. CIE-Mochis 2. Emerson Process Mgmt.

3. IMT 4. IT-Dgo (2) 5. IT-Saltillo 6. ITESM-Qro (2) 7. U Guanajuato (3) 8. UAA 9. UABC 10. UAM-C (3) 11. UANL (2)

12. UAQ 13. UASLP (7) 14. UATlax 15. UDLAP (9) 16. UNACAR (2) 17. UNCA 18. Unicauca 19. UPSLP (3) 20. UTM (3) 21. UV (5)

Page 5: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Actividades de la Comunidad de IHC

• Día Virtual de Sistemas Colaborativos

– 18 de octubre 2013, 10:00 AM

– Ponentes de México, España, Colombia, Argentina

• Día Mundial de la Usabilidad

– 14 de noviembre

– UANL, #WUDUANL

– usabilidad.uanl.mx

Page 6: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Agenda

• Comprensión de colecciones

• Visualización de información

• Minería visual

• Visualización para la comprensión de colecciones

• Avances en el Laboratorio ICT (UDLAP)

• Perspectivas

Page 7: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Colección digital

Conjunto de documentos u objetos digitales seleccionados y disponibles

a comunidades de usuarios

Page 8: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo
Page 9: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo
Page 10: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo
Page 11: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo
Page 12: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Para aprovechar mejor las colecciones, necesitamos comprender su contenido

(temas, autores, fechas, instituciones, inter-relaciones,…)

Page 13: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Entendimiento “bottom-up”

• Métodos de recuperación de información

• Se requiere un esfuerzo significativo

Page 14: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Entendimiento “bottom-up”

Page 15: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Entendimiento “bottom-up” w

ww

.re

meri

.org

.mx

Page 16: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Comprensión de colecciones

• Busca cambiar el enfoque de la recuperación de objetos específicos a ofrecer una vista completa de cada colección

[Chang et al. 2004]

Page 17: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

La comprensión de colecciones puede apoyarse en la

visualización de información

Page 18: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Visualización de información

• Transformación de datos simbólicos a representaciones geométricas

Page 19: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Visualización de información

Page 20: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Visualización de grandes volúmenes de información

Page 21: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

TreeMaps

http://en.wikipedia.org/wiki/File:Tree_Map.png

http://www.randelshofer.ch/treeviz/index.html

[Shneiderman 1992]

Page 22: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Árboles hiperbólicos

[Lamping and Rao 1999]

htt

p:/

/ww

w.r

an

de

lsh

ofe

r.ch

/tre

eviz

/in

de

x.h

tml

Page 23: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Campos de estrellas

[HCIL UMD]

Page 24: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Puntos

(Iwata et al., 2008)

Page 25: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Redes

(Lehmann et al., 2010)

Page 26: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Grupos

(Zhang et al., 2010)

Page 27: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Jerarquías

(Collins et al., 2010)

Page 28: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Líneas de tiempo

(Wei et al., 2010)

Page 29: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Paisajes

http://ip-science.thomsonreuters.com/winningmove/secure/TI_Themescape_QT.html

Page 30: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Estado del arte

Funciones

Page 31: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Minería visual: Proceso de exploración de colecciones basado

principalmente en la percepción humana para detectar patrones, estructuras o comportamientos interesantes

Normalmente, el resultado de la minería visual no se conoce de

antemano

[Cox et al. 1997]

Page 32: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Estado del arte

Page 33: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Comprensión de colecciones en el Laboratorio ICT de UDLAP

Page 34: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Campos de estrellas escalables (EVA2D)

– Más de 200,000 libros

– Zoom directo

– Feedback cuasi-inmediato

– Filtros de precisión

[Silva et al. 2003]

Page 35: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Minería visual con EVA2D

[Sánchez et al. 2005]

– Zoom directo

– Ejes dinámicos

Por resolver:

– Pérdida de contexto

– Pistas para puntos sobre múltiples libros

– Acceso a los documentos completos

Page 36: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Ojos de pescado (fisheye views)

©2

00

8, E

rle

nd

Rob

aye

Page 37: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Star-fish: Contexto+foco

Lente Fisheye

Iconos distintos para tipos de publicaciones

Iconos para elementos múltiples

Sobre una federación de colecciones

[Sánchez et al. 2007]

Page 38: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Star-fish: Contexto+foco

[Sánchez et al. 2007]

Page 39: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Visualización de relaciones

Page 40: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Redes de colaboración

• Estructuras que representan grupos inter-conectados de personas que trabajan juntos con niveles variados de acoplamiento

• Particularmente interesantes las redes de colaboración implícitas

Page 41: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

¿A quién interesan las redes de colaboración?

• Investigadores:

– Para conocer sobre su propia comunidad

– Para encontrar socios de proyectos multi-disciplinarios, multi-institutionales, multi-nacionales

• Agencias de financiamiento

– Para definir beneficiarios potenciales de convocatorias

– Para validar grupos de trabajo propuestos

Page 42: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Cosecha y minería de metadatos

• Meta: Derivar, visualizar y explorar redes de colaboración a partir de colecciones digitales

Page 43: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Visualización de redes de colaboración

• Enfoque tradicional: nodos y aristas

Page 44: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Grafos egocéntricos

Instituciones Autores

[Bolaños 2010]

Page 45: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Escalabilidad…

[Bolaños 2010]

Page 46: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Grafos egocéntricos + filtros

Page 47: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

OntoStarFish: Campos de estrellas ontológicos + Fisheyes

Fisheye lens 1

Fisheye lens 2 Starfieldoverview

Ontologicalaxes

coun

try

inst

itutio

n

auth

or

general subjects

more specific subjects

[Sánchez et al. 2011; Ramos et al. 2010]

Page 48: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Localizando investigadores

[Sánchez et al. 2011]

Page 49: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Localizando colaboradores potenciales

países

[Sánchez et al. 2011]

Page 50: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Expansión de ambos ejes

autores

instituciones

países

[Sánchez et al. 2011]

Page 51: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Uso de múltiples lentes fisheye

[Sánchez et al. 2011]

Page 52: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Visualización de agrupamientos y relaciones usando mapas

Page 53: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Los mapas pueden ser una metáfora clave para comprensión de colecciones

[Gutiérrez et al. 2012; Gutiérrez 2013]

Page 54: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Navegación jerárquica (aplicación consistente de la metáfora)

Nivel de documentos

[Gutiérrez et al. 2012; Gutiérrez 2013]

Page 55: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Filtros por institución o tema

[Gutiérrez et al. 2012; Gutiérrez 2013]

Page 56: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Evolución en el tiempo

2004 2007 2010 2013

Page 57: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

VoroSOM: mapas auto-organizables + diagramas de Voronoi

• Mapas auto-organizados (SOMs) – Funcionan como clasificadores, produciendo

jerarquías de categorías – ideal para navegar

– Preservan propiedades topológicas de relaciones existentes en los metadatos

• Diagramas de Voronoi – Se pueden construir sobre una representación

espacial 2D de las categorías SOM

– Reflejan visualmente las relaciones semánticas de las categorías adyacentes

Page 58: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Alternativas de representación

“Continentes” “Islas”

Page 59: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

VoroSOM - Continentes

Page 60: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Navegación continentes

Page 61: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

VoroSOM - Islas

Page 62: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Navegación islas

Page 63: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Prototipos disponibles

• VoroSOM – Continentes:

– http://ict.udlap.mx/remeri/vorosom1

– http://ict.udlap.mx/remeri/vorosom2

• VoroSOM – Islas

– http://ict.udlap.mx/remeri/vorosom3

Page 64: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Evaluación (8 sujetos, verbalización constructiva)

Panorama general

Claridad de las categorías

Claridad en el tamaño

Relaciones entre categorías

Exploración fácil e intuitiva

Semántica y relación de docs

Uso para investigación

Descubrimiento de información

0

Page 65: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Representaciones alternas

Page 66: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Representaciones alternas

Page 67: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Representaciones alternas

Page 68: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Conclusiones

• La minería visual puede apoyar en la comprensión de grandes colecciones

• Para facilitar la minería visual, la visualización de información requiere:

– Metáforas y representaciones accesibles

– Interactividad

– Mecanismos de inferencia y clasificación dinámicos

Page 69: Minería Visual de Grandes Volúmenes de Información...VoroSOM: mapas auto-organizables + diagramas de Voronoi •Mapas auto-organizados (SOMs) –Funcionan como clasificadores, produciendo

Invitación

• Comunidad CUDI de IHC (www.cudi.edu.mx)

• Comunidad Latinoamericana de IHC – www.sigchi.org/communities

/laihc

• Congreso Latinoamericano

de IHC (CLIHC 2013), http//clihc.org, Costa Rica, 4-5 Dic. – Orador invitado: Jonathan

Grudin