Introducción al Opendata
Francisco Cifuentes Silva
Sistemas y Servicios de Información en Red – BCN
20-12-2013
Objetivos del curso
• Revisar distintos conceptos asociados al mundo de la Web, Web
Semántica, datos enlazados y datos abi...
Competencias a adquirir
• Poder identificar correctamente conceptos asociados a la temática
del OpenData tales como XML, W...
Qué es el OpenData
Qué es OpenData o Datos Abiertos
• Es una filosofía de publicación de datos que busca brindar libre
acceso y uso de estos ...
La importancia del OpenData
Beneficios:
• Generan confianza promoviendo la transparencia en la
información
• Facilitan est...
OpenData en la BCN
• La BCN implementa todos las las fases del ciclo de Linked Data
OpenData en la BCN
Datos abiertos disponibles (Modelos y datos):
• Normas Legales
• Parlamentarios
• Sesiones parlamentari...
Qué son las 5 estrellas de Linked Data
Qué son las 5 estrellas de Linked Data
★ Bajo licencia abierta
•Se puede ver e imprimir
•Se puede almacenar localmente
•Se...
Qué son las 5 estrellas de Linked Data
★★ Estructurados (Machine-readable)
•Todo lo de 1 estrella más
•Procesar directamen...
Qué son las 5 estrellas de Linked Data
★★★ En formato libre
•Todo lo de 2 estrellas más
•Se pueden manipular los datos con...
Qué son las 5 estrellas de Linked Data
★★★★ Usar URIs
•Todo lo de 3 estrellas más
•Se pueden enlazar desde cualquier parte...
Qué son las 5 estrellas de Linked Data
★★★★★ Enlazar a otros datos
•Todo lo de 4 estrellas más
•Descubrir más datos relaci...
Datos abiertos y enlazados
• http://datos.bcn.cl/recurso/pais/chile/datos.html
• http://www.ted.com/talks/tim_berners_lee_...
Iniciativas OpenData
Iniciativas OpenData
• Gobierno
– Transparencia
– Biblitotecas
– Municipios
• Universidades
– DBLP
– Opencourseware
– DBPe...
Iniciativas OpenData
• Centros científicos
– CERN
– NASA
– USGS
– NCBI
• Empresas
– Renault
– Google
– Yahoo
– Euroalert: ...
Conceptos clave
Sintaxis
“Parte de la gramática que estudia las reglas que gobiernan la
combinatoria de elementos.”
Desde la RAE
“Parte de...
Metamodelo
Conjunto de elementos
relacionados bajo cierta
semántica que combinados
permitirán especificar,
construir y doc...
Modelo
Conjunto de elementos definidos
en el metamodelo que
combinados permitirán
especificar, construir y
documentar elem...
Instancias de un modelo
Elementos definidos en un modelo que representan una entidad
“del mundo real”
Metemodelo – modelo - instancias
Elementos del
mundo real
(dominio)
Elementos del
mundo real
(dominio)
ModeloModelo Metamo...
Dato
Representación simbólica (número, texto, valor de verdad, fecha,
etc.) que permite describir un hecho relativo a una ...
Tipo de dato
Atributo de un dato que indica su naturaleza.
Ejemplo:
Dato Valor Tipo de dato
año 2012 Numero entero
Probabi...
HTTP
Hyper Text Transfer Protocol
• Primera versión por Tim Berners-Lee 1990
• Especificación RFC2616 (1.1)
• Base de lo q...
URL - URI- IRI
URL
• Uniform Resource Locator
• Universal Resource Locator
• Cadena de caracteres que permite referenciar ...
URL - URI- IRI
URI
• Uniform Resource Identifier
• Cadena de caracteres que permite identificar un recurso unívocamente, a...
URL - URI- IRI
IRI
• Internationalized Resource Identifier
• Es una URI, pero que permite cualquier tipo de carácter Unico...
URI HTTP
Una URI HTTP es una URI sobre la Web
Ejemplo:
http://datos.bcn.cl/recurso/persona/123
Y la URL de una página
http...
Negociación de Contenido
Mecanismo que permite a un servidor de datos entregar contenido el
correcto a quien lo solicita
G...
XML
• Lenguaje de Marcas Extensible
• Desarrollado por W3C para estructurar archivos de texto
• Importante rol como estánd...
XML - ejemplo
Versión XML Versión Texto
<Documento>
<Titulo>
Protección a los deudores de créditos en
dinero</Titulo><Cuer...
XML
Múltiples usos:
• Bases de datos
• Definición de configuraciones
• Estructuración de documentos de texto
• Servicios W...
Qué es la Web
Qué NO es la Web:
• No son los computadores en Red
• No son los programas de mensajería ni el torrent
• No e...
Qué es la Web
• Es un espacio donde convive el total de documentos publicados
sobre protocolo HTTP/HTTPS el relacionados e...
La Web Semántica
“Es una extensión de la Web actual en donde la información es
entregada de manera bien definida, habiltan...
La Web Semántica
Activar un nuevo modelo mental, posibilita nuevos tipos de
búsqueda en la Web.
¿cómo obtenemos el siguien...
La Web de Datos
La Web
La Web como
BD
LimitantesLimitantes
Orientada al usuario
Enlaces sin significado
Difícil extraer in...
Cómo llegar a una Web de datos
Ciclo de vida de los datos abiertos
1. Modelado
2. Generación
3. Publicación
4. Consumo de ...
Por qué modelar: el gran problema
• Personas, organizaciones y sistemas de software necesitan
comunicarse
• Cada uno tiene...
Un ejemplo: ¿qué es la leche?
Personas Alimento
Software Código
binario
Empresa Producto
Diseñar y modelar
Un modelo permitirá:
• Comunicación: unificar puntos de vista
• Interoperabilidad: un lenguaje común par...
Tecnologías asociadas al modelado
• Ontologías
• Taxonomías
• Tesauros
• Jerarquías de conceptos
• Esquemas
• DTD
• WSDL
¿Qué es una ontología?
Nace en la filosofía, rama de la metafísica que estudia la
existencia de las entidades.
En informát...
¿Qué es una ontología?
“Las ontologías son modelos conceptuales que capturan y hacen
explícito el vocabulario usado en un ...
Usos y aplicaciones de las ontologías Web
 Modelo de datos compartido
 Definición de un sistema complejo
 Estructura je...
Folksonomías
• Sistema de indexación social
• Clasificación colectiva por medio de etiquetas o palabras clave
• Sin jerarq...
Vocabularios controlados
• Lista selecta de palabras y frases para etiquetado
• Permite uniformar un mismo concepto que ap...
Taxonomías
• Nace en las ciencias
biológicas para la
clasificación de organismos.
• Utilizada para categorizar y
clasifica...
Tesauros
Listas de términos orientados a la
normalización terminológica
• Permiten Interrelaciones:
• Jerárquica (parte de...
Esquemas DTD - XSD
Ambas tecnologías permiten describir
modelos para definir la estructura
de un documento XML
DTD: Defini...
Tecnologías asociadas a la generación
• Ofimática: Archivos Excel, SPSS, Word, PDF
• ETL: Herramientas de extracción, tran...
Fase de publicación
Tecnologías asociadas a la publicación
• Formatos de archivo: HTML, JSON, XLS, TXT, CSV, XML
• Tecnologías de Web Semántic...
Formatos de archivo
HTML, JSON, XLS, TXT, CSV, XML, PDF, RSS
• Cada uno permite representar la información ya sea desde 1
...
Tecnologías de Web Semántica
RDF: Resource Description Framework
• Recomendación W3c en 1999
• Método para describir recur...
Tecnologías de Web Semántica
PREFIX bcnnorms: <http://datos.bcn.cl/ontologies/bcn-norms#>
PREFIX rdf: <http://www.w3.org/1...
Tecnologías de Web Semántica
Bases de datos
Muchas proveen mecanismos de publicación de datos:
• Endpoint SPARQL como: htt...
Tecnologías de Web Semántica
API’s: Interfaz de Programación de Aplicaciones
Son puntos de conexión que ofrece una aplicac...
Tecnologías de Web Semántica
Bases de datos
Muchas proveen mecanismos de publicación de datos:
• Endpoint SPARQL como: htt...
Tecnologías de Web Semántica
Microdatos (Schema.org)
• Modelo normalizado de metadatos generado por los buscadores
Google,...
Tecnologías de Web Semántica
BigData
Aunque no es siempre OpenData, este concepto hace referencia a
grandes volúmenes de d...
Tecnologías asociadas al consumo
• Herramientas de visualización
• Herramientas de análisis y cruzamiento de datos
• Sitio...
Tecnologías asociadas al consumo
• Herramientas de visualización
– http://datos.bcn.cl/es/informacion/bcn-en-linked-open-d...
Vocabularios y ontologías
Existen vocabularios de uso general que ya modelan ciertos
dominios, algunas de las más conocida...
Vocabularios y ontologías
Para buscar vocabularios existentes relacionados con nuestro
dominio, algunas herramientas (http...
Validación de nuestra ontología
Verificación de integridad y consistencia:
http://swse.deri.org/RDFAlerts/
Validación RDF ...
Upcoming SlideShare
Loading in...5
×

Introduccion a OpenData

281

Published on

Published in: Data & Analytics
0 Comments
1 Like
Statistics
Notes
  • Be the first to comment

No Downloads
Views
Total Views
281
On Slideshare
0
From Embeds
0
Number of Embeds
0
Actions
Shares
0
Downloads
10
Comments
0
Likes
1
Embeds 0
No embeds

No notes for slide
  • Datos abiertos enlazados
    Publicados sobre HTTP.
    Referenciar mediante URIs
    En cada URI, publicar información bajo estándares abiertos.
    Incluir enlaces a otras URI, permitir el descubrimiento de nueva información
  • Datos abiertos enlazados
    Publicados sobre HTTP.
    Referenciar mediante URIs
    En cada URI, publicar información bajo estándares abiertos.
    Incluir enlaces a otras URI, permitir el descubrimiento de nueva información
  • Datos abiertos enlazados
    Publicados sobre HTTP.
    Referenciar mediante URIs
    En cada URI, publicar información bajo estándares abiertos.
    Incluir enlaces a otras URI, permitir el descubrimiento de nueva información
  • Datos abiertos enlazados
    Publicados sobre HTTP.
    Referenciar mediante URIs
    En cada URI, publicar información bajo estándares abiertos.
    Incluir enlaces a otras URI, permitir el descubrimiento de nueva información
  • Datos abiertos enlazados
    Publicados sobre HTTP.
    Referenciar mediante URIs
    En cada URI, publicar información bajo estándares abiertos.
    Incluir enlaces a otras URI, permitir el descubrimiento de nueva información
  • Datos abiertos enlazados
    Publicados sobre HTTP.
    Referenciar mediante URIs
    En cada URI, publicar información bajo estándares abiertos.
    Incluir enlaces a otras URI, permitir el descubrimiento de nueva información
  • Hasta aquí llegamos
  • Introduccion a OpenData

    1. 1. Introducción al Opendata Francisco Cifuentes Silva Sistemas y Servicios de Información en Red – BCN 20-12-2013
    2. 2. Objetivos del curso • Revisar distintos conceptos asociados al mundo de la Web, Web Semántica, datos enlazados y datos abiertos • Reconocer y utilizar diversos formatos de datos • Identificar diversos componentes y sus funciones asociados al diseño, generación, publicación y consumo de datos abiertos
    3. 3. Competencias a adquirir • Poder identificar correctamente conceptos asociados a la temática del OpenData tales como XML, Web Semántica, Ontologías, Datos Abiertos, entre otras. • Reconocer en contexto distintos estándares y modelos asociados al concepto de OpenData • Conocer y utilizar herramientas y sitios que publican datos de manera abierta • Comprender el modelo de OpenData utilizado en la BCN
    4. 4. Qué es el OpenData
    5. 5. Qué es OpenData o Datos Abiertos • Es una filosofía de publicación de datos que busca brindar libre acceso y uso de estos a todo el mundo • Incorpora buenas prácticas necesarias para la explotación de estos • Fundamentalmente están publicados sobre la Web de manera gratuita y sin restricciones • OpenData se asocia directamente con la Web • Único medio para brindar disponibilidad universal libre
    6. 6. La importancia del OpenData Beneficios: • Generan confianza promoviendo la transparencia en la información • Facilitan estudios e investigación • Los datos públicos pertenecen a la nación, son concebidos gracias a los impuestos de la ciudadanía En el caso de la BCN • Aseguran que la legislación y su proceso sea conocida
    7. 7. OpenData en la BCN • La BCN implementa todos las las fases del ciclo de Linked Data
    8. 8. OpenData en la BCN Datos abiertos disponibles (Modelos y datos): • Normas Legales • Parlamentarios • Sesiones parlamentarias • Proyectos de Ley • Lugares geográficos • Transparencia BCN Disponibles bajo las 5 estrellas de Linked Open Data
    9. 9. Qué son las 5 estrellas de Linked Data
    10. 10. Qué son las 5 estrellas de Linked Data ★ Bajo licencia abierta •Se puede ver e imprimir •Se puede almacenar localmente •Se puede ingresar los datos a otro sistema •Se pueden cambiar los datos •Se pueden compartir con otros •Fácil de publicar
    11. 11. Qué son las 5 estrellas de Linked Data ★★ Estructurados (Machine-readable) •Todo lo de 1 estrella más •Procesar directamente con software propio para agregarlo, realizar cálculos, visualizar etc. •Exportar a otro formato estructurado •Aun es fácil de publicar
    12. 12. Qué son las 5 estrellas de Linked Data ★★★ En formato libre •Todo lo de 2 estrellas más •Se pueden manipular los datos con el programa que el usuario determine, sin requerir software propietario
    13. 13. Qué son las 5 estrellas de Linked Data ★★★★ Usar URIs •Todo lo de 3 estrellas más •Se pueden enlazar desde cualquier parte •Reusar partes de los datos •Reusar herramientas existentes •Combinar datos de manera segura con otros •Se tiene el control granular de los datos •Requiere mayor esfuerzo de publicación
    14. 14. Qué son las 5 estrellas de Linked Data ★★★★★ Enlazar a otros datos •Todo lo de 4 estrellas más •Descubrir más datos relacionados •Aprender sobre el esquema de datos •Incrementar el valor de los datos •Mayor costo de publicación y mantención
    15. 15. Datos abiertos y enlazados • http://datos.bcn.cl/recurso/pais/chile/datos.html • http://www.ted.com/talks/tim_berners_lee_the_year_open_data_w ent_worldwide.html • http://www.youtube.com/watch?v=qZ-I_pqXUHM
    16. 16. Iniciativas OpenData
    17. 17. Iniciativas OpenData • Gobierno – Transparencia – Biblitotecas – Municipios • Universidades – DBLP – Opencourseware – DBPedia
    18. 18. Iniciativas OpenData • Centros científicos – CERN – NASA – USGS – NCBI • Empresas – Renault – Google – Yahoo – Euroalert: licitaciones y contratos públicos
    19. 19. Conceptos clave
    20. 20. Sintaxis “Parte de la gramática que estudia las reglas que gobiernan la combinatoria de elementos.” Desde la RAE “Parte de la gramática que enseña a coordinar y unir las palabras para formar las oraciones y expresar conceptos.” “Conjunto de reglas que definen las secuencias correctas de los elementos de un lenguaje de programación.”
    21. 21. Metamodelo Conjunto de elementos relacionados bajo cierta semántica que combinados permitirán especificar, construir y documentar un modelo El metamodelo ofrecerá los elementos para construir un modelo
    22. 22. Modelo Conjunto de elementos definidos en el metamodelo que combinados permitirán especificar, construir y documentar elementos del dominio (conceptualización del mundo real) denominadas instancias
    23. 23. Instancias de un modelo Elementos definidos en un modelo que representan una entidad “del mundo real”
    24. 24. Metemodelo – modelo - instancias Elementos del mundo real (dominio) Elementos del mundo real (dominio) ModeloModelo MetamodeloMetamodelo describedescribe describedescribe
    25. 25. Dato Representación simbólica (número, texto, valor de verdad, fecha, etc.) que permite describir un hecho relativo a una entidad. Una estructura de datos permite describir una entidad mediante atributos o características.
    26. 26. Tipo de dato Atributo de un dato que indica su naturaleza. Ejemplo: Dato Valor Tipo de dato año 2012 Numero entero Probabilidad de ganar el loto 0.0000000000000 00000000000001 Número real Soy humano sí booleano La inicial de mi nombre “F” Carácter de texto Mi nombre “Francisco” Cadena de caracteres
    27. 27. HTTP Hyper Text Transfer Protocol • Primera versión por Tim Berners-Lee 1990 • Especificación RFC2616 (1.1) • Base de lo que conocemos como “la Web” cliente servidor Internet Petición HTTP Respuesta HTTP
    28. 28. URL - URI- IRI URL • Uniform Resource Locator • Universal Resource Locator • Cadena de caracteres que permite referenciar un recurso sobre Internet. Ejemplos: • http://www.bcn.cl/index.html • ftp://documentos.bcn.cl/publicaciones/articulo1.pdf
    29. 29. URL - URI- IRI URI • Uniform Resource Identifier • Cadena de caracteres que permite identificar un recurso unívocamente, algo similar a una clave primaria universal. • El uso de URI’s permite separar el recurso de sus múltiples representaciones. • Adicionalmente, una URI permite identificar segmentos Ejemplo de URI: • http://datos.bcn.cl/recurso/cl/ley/18010/ Representaciones de este recurso: • http://www.leychile.cl/Navegar?idNorma=29438 • http://datos.bcn.cl/recurso/cl/ley/18010/datos.rdf
    30. 30. URL - URI- IRI IRI • Internationalized Resource Identifier • Es una URI, pero que permite cualquier tipo de carácter Unicode (como japonés, Chino, Cyrílico, Español). Ejemplo de IRI: http://biografias.bcn.cl/wiki/Néstor_Jofré_Núñez http://www.w3.org/2003/Talks/0904-IUC-IRI/slide11-0.html
    31. 31. URI HTTP Una URI HTTP es una URI sobre la Web Ejemplo: http://datos.bcn.cl/recurso/persona/123 Y la URL de una página http://datos.bcn.cl/recurso/persona/123/datos.htm l
    32. 32. Negociación de Contenido Mecanismo que permite a un servidor de datos entregar contenido el correcto a quien lo solicita GET /recurso/Francisco.rdf Accept: application/rdf+xml GET /recurso/Francisco Accept: application/rdf+xml 303 See Other Location: 200 OK Content-type: Application/rdf+xml;charset=utf-8
    33. 33. XML • Lenguaje de Marcas Extensible • Desarrollado por W3C para estructurar archivos de texto • Importante rol como estándar de intercambio en Internet • Permite a cada usuario definir esquemas de marcas propias • Permite definir estructuras de datos propias Ejemplos: • http://lod-cloud.net/versions/2011-09-19/lod-cloud.svg • http://hley-dev.bcn.cl/recurso.php/cl/doc- publicado/1093349/es@2012-05-05,session3132.xml
    34. 34. XML - ejemplo Versión XML Versión Texto <Documento> <Titulo> Protección a los deudores de créditos en dinero</Titulo><Cuerpo> Ya fue publicada la Ley 20.715 que busca evitar que se cobren tasas de interés abusivas a las personas que acceden a los mercados formales de crédito, mediante una rebaja de la Tasa Máxima Convencional (TMC), específicamente para las operaciones de crédito de dinero. Revise el texto completo de la norma y la Historia de la Ley. </Cuerpo><Fecha> 16 de diciembre 2013</Fecha> </Documento> Protección a los deudores de créditos en dinero Ya fue publicada la Ley 20.715 que busca evitar que se cobren tasas de interés abusivas a las personas que acceden a los mercados formales de crédito, mediante una rebaja de la Tasa Máxima Convencional (TMC), específicamente para las operaciones de crédito de dinero. Revise el texto completo de la norma y la Historia de la Ley. 16 de diciembre 2013
    35. 35. XML Múltiples usos: • Bases de datos • Definición de configuraciones • Estructuración de documentos de texto • Servicios Web • Páginas Web • Interoperabilidad • Representación en árbol de documento
    36. 36. Qué es la Web Qué NO es la Web: • No son los computadores en Red • No son los programas de mensajería ni el torrent • No es lo mismo que la Internet • Google?
    37. 37. Qué es la Web • Es un espacio donde convive el total de documentos publicados sobre protocolo HTTP/HTTPS el relacionados entre sí por enlaces (también conocidos como links)
    38. 38. La Web Semántica “Es una extensión de la Web actual en donde la información es entregada de manera bien definida, habiltando que computadores y personas puedan trabajar mejor en cooperación” Berners-Lee T. 2001 Basada en una pila de tecnologías (Semantic Web Stack)
    39. 39. La Web Semántica Activar un nuevo modelo mental, posibilita nuevos tipos de búsqueda en la Web. ¿cómo obtenemos el siguiente resultado de búsqueda? “Todas las novelas de autores nacidos en América del sur antes de 1950 que hablen sobre viajes a alguna ciudad Europea”
    40. 40. La Web de Datos La Web La Web como BD LimitantesLimitantes Orientada al usuario Enlaces sin significado Difícil extraer información Cómo mejorarCómo mejorar Agregar metadatos Leíbles por máquinas Datos enlazados Documentos etiquetados con metadatos Cómo mejorarCómo mejorar Publicar datos en Formatos interoperables Mucha información Mucha información
    41. 41. Cómo llegar a una Web de datos Ciclo de vida de los datos abiertos 1. Modelado 2. Generación 3. Publicación 4. Consumo de datos
    42. 42. Por qué modelar: el gran problema • Personas, organizaciones y sistemas de software necesitan comunicarse • Cada uno tiene diferente conocimiento previo, contexto y puntos de vista • Visión compartida dificulta la construcción de sistemas
    43. 43. Un ejemplo: ¿qué es la leche? Personas Alimento Software Código binario Empresa Producto
    44. 44. Diseñar y modelar Un modelo permitirá: • Comunicación: unificar puntos de vista • Interoperabilidad: un lenguaje común para todos Beneficios  Reusabilidad: podrá usarse en múltiples contextos, tiempo, etc.  Fiabilidad: cierta certeza de los datos respecto a un modelo  Especificación: homogeneizar realidad, puntos de vista, acuerdo
    45. 45. Tecnologías asociadas al modelado • Ontologías • Taxonomías • Tesauros • Jerarquías de conceptos • Esquemas • DTD • WSDL
    46. 46. ¿Qué es una ontología? Nace en la filosofía, rama de la metafísica que estudia la existencia de las entidades. En informática “Es una especificación de una conceptualización” Thomas Gruber, 1993
    47. 47. ¿Qué es una ontología? “Las ontologías son modelos conceptuales que capturan y hacen explícito el vocabulario usado en un dominio o en una aplicación semántica, de forma de garantizar la ausencia de ambigüedades” Breitman et al., 2007 “Una ontología es leíble tanto por humanos como por máquinas. En conjunto con una sintaxis y semántica, provee el lenguaje por el que sistemas basados en conocimiento pueden interoperar (ej. Intercambiar aserciones, consultas y respuestas). Una ontología determina lo que existe para un sistema.” Gruber, 1992
    48. 48. Usos y aplicaciones de las ontologías Web  Modelo de datos compartido  Definición de un sistema complejo  Estructura jerárquica de elementos y sus relaciones  Validación de datos
    49. 49. Folksonomías • Sistema de indexación social • Clasificación colectiva por medio de etiquetas o palabras clave • Sin jerarquía • Sin relaciones Sitios Web representativos • Flickr • Del.icio.us • Bibsonomy
    50. 50. Vocabularios controlados • Lista selecta de palabras y frases para etiquetado • Permite uniformar un mismo concepto que aparece en diferentes palabras, garantizando coherencia • En Web Semántica, un vocabulario es similar a una ontología pero sin reglas (menor expresividad)
    51. 51. Taxonomías • Nace en las ciencias biológicas para la clasificación de organismos. • Utilizada para categorizar y clasificar elementos. • Incorporan una estructura y jerarquización de estos conceptos.
    52. 52. Tesauros Listas de términos orientados a la normalización terminológica • Permiten Interrelaciones: • Jerárquica (parte de, general, particular) • Polijerárquica (pertenecer a más de una parte) • Equivalencia (sinónimos, polisemia, homonimia, antonimia, • Asociativas (dos elementos que se relacionan de alguna forma) http://www.visualthesaurus.com
    53. 53. Esquemas DTD - XSD Ambas tecnologías permiten describir modelos para definir la estructura de un documento XML DTD: Definición de tipo de documento Define elementos permitidos, sintaxis y estructura de un documento XSD: XML Schema Definition Además de definir lo mismo que DTD, agrega tipos de datos, estructuras de datos complejas y distintas fuentes de definición de etiquetas (espacios de nombre)
    54. 54. Tecnologías asociadas a la generación • Ofimática: Archivos Excel, SPSS, Word, PDF • ETL: Herramientas de extracción, transformación y carga • OCR: Reconocimiento Óptico de Caracteres • NLP: Procesamiento del lenguaje Narural • Web Scraping: Extraer información desde sitios Web (raspado Web)
    55. 55. Fase de publicación
    56. 56. Tecnologías asociadas a la publicación • Formatos de archivo: HTML, JSON, XLS, TXT, CSV, XML • Tecnologías de Web Semántica: RDF, SPARQL • Bases de datos • No solo texto, múltiples API en diferentes tipos de media (imágenes, audio, video) • Microdatos (Schema.org), Microformatos, RDFa • BigData
    57. 57. Formatos de archivo HTML, JSON, XLS, TXT, CSV, XML, PDF, RSS • Cada uno permite representar la información ya sea desde 1 estrella hasta las 5 • Distintas narutalezas para distintos propósitos Ejemplo • HTML: Páginas Web vistas en un navegador • CSV/XLS: Hojas de cálculo • PDF: Documentos finales • JSON: Representación Javascript • RSS: Compartir contenido en la Web
    58. 58. Tecnologías de Web Semántica RDF: Resource Description Framework • Recomendación W3c en 1999 • Método para describir recursos – Recurso: algo que pueda identificarse mediante una URI – Propiedad: una característica o atributo de un recurso • Recursos se describen basados en el concepto de tripleta: sujeto – propiedad – objeto http://ejemplo.org#Pedrohttp://ejemplo.org#Pedro http://ejemplo.org#Juanhttp://ejemplo.org#Juan http://ejemplo2.org#tieneHijo
    59. 59. Tecnologías de Web Semántica PREFIX bcnnorms: <http://datos.bcn.cl/ontologies/bcn-norms#> PREFIX rdf: <http://www.w3.org/1999/02/22-rdf-syntax-ns#> PREFIX dc: <http://purl.org/dc/elements/1.1/> select distinct ?titulo ?norma ?nombreOrg where { ?norma rdf:type ?clase . ?norma bcnnorms:createdBy ?org . ?org bcnnorms:hasName ?nombreOrg. ?norma dc:title ?titulo. ?norma bcnnorms:isTreatyWith ?pais. ?pais bcnnorms:hasName "España". ?norma bcnnorms:type ?tipo . ?tipo bcnnorms:hasName "Decreto". ?norma bcnnorms:publishDate ?pub_date . FILTER (xsd:dateTime(?pub_date) >= "1990-01-01T00:00:00Z"^^xsd:dateTime && xsd:dateTime(?pub_date) <= "2000-12-31T00:00:00Z"^^xsd:dateTime) . }
    60. 60. Tecnologías de Web Semántica Bases de datos Muchas proveen mecanismos de publicación de datos: • Endpoint SPARQL como: http://datos.bcn.cl/sparql • Linked data Frontend: negociador de contenido para mostrar datos • Servicios Web Algunas de ellas • Openlink Virtuoso • OWL Lim • Oracle
    61. 61. Tecnologías de Web Semántica API’s: Interfaz de Programación de Aplicaciones Son puntos de conexión que ofrece una aplicación para que otras aplicaciones se conecten y utilicen sus datos o procesamiento. Miles de APIs disponibles para utilizar datos, ejemplo: http://www.programmableweb.com/
    62. 62. Tecnologías de Web Semántica Bases de datos Muchas proveen mecanismos de publicación de datos: • Endpoint SPARQL como: http://datos.bcn.cl/sparql • Linked data Frontend: negociador de contenido para mostrar datos • Servicios Web Algunas de ellas • Openlink Virtuoso • OWL Lim • Oracle
    63. 63. Tecnologías de Web Semántica Microdatos (Schema.org) • Modelo normalizado de metadatos generado por los buscadores Google, Yahoo y Bing • Es un gran vocabulario que permite mejorar las búsquedas Ejemplo: Vocabulario GoodRelations: http://www.heppnetz.de/projects/goodrelations/ Microformatos Metadatos basados en atributos HTML Permite incrustar metadatos básicos como titulo, fecha en texto html RDFa RDF Attributes – es una versión de RDF que puede ser incrustada en páginas HTML mediante atributos presentes en este
    64. 64. Tecnologías de Web Semántica BigData Aunque no es siempre OpenData, este concepto hace referencia a grandes volúmenes de datos. Ejemplos: • Base de datos del genoma • Búsqueda sobre la Web • Procesamiento de datos para la predicción del clima • Análisis de datos en empresas • Análisis de texto
    65. 65. Tecnologías asociadas al consumo • Herramientas de visualización • Herramientas de análisis y cruzamiento de datos • Sitios Web • Open refine • Agentes de software
    66. 66. Tecnologías asociadas al consumo • Herramientas de visualización – http://datos.bcn.cl/es/informacion/bcn-en-linked-open-data • Herramientas de análisis y cruzamiento de datos • Sitios Web – http://thewebindex.org • Open refine • Agentes de software
    67. 67. Vocabularios y ontologías Existen vocabularios de uso general que ya modelan ciertos dominios, algunas de las más conocidas son: – FOAF: Friend of a friend – DC: Dublin Core – GN: Geonames – GEO: Información geográfica – SDMX: Información estadística – XBRL: Información financiera y económica – Datacube / Scovo: Estadísticas y OLAP – TIME: Tiempo, fechas, periodos – BIO: Información biográfica – FRBR: Información bibliográfica
    68. 68. Vocabularios y ontologías Para buscar vocabularios existentes relacionados con nuestro dominio, algunas herramientas (http://www.w3.org/wiki/Search_engines): http://kmi-web05.open.ac.uk/WatsonWUI/ http://swoogle.umbc.edu/ http://ws.nju.edu.cn/falcons/objectsearch/
    69. 69. Validación de nuestra ontología Verificación de integridad y consistencia: http://swse.deri.org/RDFAlerts/ Validación RDF y visualización en SVG: http://www.w3.org/RDF/Validator/ Generación de documentación: http://ontorule-project.eu/parrot/parrot
    1. A particular slide catching your eye?

      Clipping is a handy way to collect important slides you want to go back to later.

    ×