Integración de DatosManejando Datos para mejorar el NegocioAbril-2013
Engineered TogetherTested Together Certified TogetherDeployed TogetherUpgraded TogetherManaged TogetherSupportedTogetherEn...
Como Integración de Datos Ayuda a mi Negocio?5 Retos actuales para Integración de DatosOn-Premise,On CloudDataQualityAny D...
Big Data = Big VentajasTransactionsYOUR Data:Decisions based onyour dataBIGData:Decisions based on alldata relevant to you...
Any Data,Any SourceBig Data – Mismas Técnicas de IntegraciónBig DataTransformationBulk Data,E-LTOLTP OLAP UnstructuredLegacy
On-Premise,On CloudCloud – Sin Impacto y Sin BarrerasOLTP OLAP UnstructuredLegacyBig DataTransformationReal-timeReplicatio...
Disponibilidad Continua – Clave en NegocioOLTP OLAP LegacyOracle GoldenGateReal-Time Replication Eliminates planned andun...
Engineered Systems – Sin impacto• Optimized bulk loads, Leverages Infiniband, Smart Storage• No data transfer to/from sepa...
ODI and Exadata – Extrema RealidadA Disruptive Improvement in Performance A complex branch of the customer’stax allocatio...
Calidad – Garantía de EficienciaCompanies Individuals ProductsDataQualityIn one hour… In one hour… In one year…• 240 busin...
Calidad – Garantía de EficienciaDataQualityRiesgos, Fraude, LogisticaFuente: El Pais Internacional – 25 de Abril de 2013“T...
MultiplesOrigenesMúltiplesDestinos• Tiempo Real• Alta Velocidad/Potencia• Simplicidad Desarrollo• Heterogeneidad en Fuente...
Oracle Data IntegratorTransformación de DatosMultiplesOrigenesMúltiplesDestinos• Tiempo Real• Alta Velocidad/Potencia• Sim...
Replica de información crítica con nulo impacto en rendimiento de los sistemas origen,enrutado, transformación y envío ent...
Oracle GoldenGate permite captura con impacto muy bajo, enrutado, transformación,y envío de datos transaccionales entre en...
Oracle GoldenGate – Casos de UsoLa Integración en Tiempo Real – aplicaciones para la empresa•Arquitectura muy flexible•Imp...
Arquitectura TécnicaDatabase(s)OrigenDatabase(s)DestinoLAN / WAN /Internet(TCP/IP)Route: Datos comprimidos, encriptados pa...
Topologías PosiblesUnidirectionalQuery OffloadingZero-Downtime MigrationBi-DirectionalHot Standby orActive-Active for HAPe...
Databases O/S and PlatformsOracle GoldenGate Capture: Oracle DB2 UDB DB2 v10 for z/OS Microsoft SQL Server 2008 R1, R2...
Oracle GoldenGateReplica de Datos en Tiempo RealMultiplesOrigenesMúltiplesDestinos• Tiempo Real• Alta Velocidad/Potencia• ...
• Capacidad de Manejar Grandes Volumenes de Datos (Millones de Registros)• Rapidez y Simplicidad de Desarrollo (Componer v...
Diseño DeclarativoChange Data Capture (CDC)Transformación E-LTvs. E-T-LArquitectura modificable en calienteCualquierDataWa...
• Grandes Volumenes de Datos• Rapidez y Simplicidad de Desarrollo• Control en Ejecución• Optimizar Transformaciones - CDC•...
Oracle GoldenGateReplica de Datos en Tiempo RealOracle Data IntegratorTransformación de DatosMultiplesOrigenesMúltiplesDes...
Los Datos contienen Errores e InconsistenciasMulticulturalidadIncidencias en Interacción HumanaPolimorfismo – Multiples Fu...
Impacto en el Negocio de la Calidad de DatosCon Malos Datos Con Buenos Datos• Incremento del riesgo, tiempo y costede inic...
6 Dimensiones de la Calidad de Datos•Que datos son incompletos o no utilizables?Completitud•Que datos están guardados en f...
Propuesta Calidad de DatosOracle Enterprise Data QualityFuentes DatosDatabasesCobol copybooksTXT filesRegistrosDescartados...
43 | © 2011 Oracle CorporationCapacidades ÚnicasOracle Enterprise Data QualitySolución Integradapara Calidad deDatosArquit...
Resumen Ventajas Calidad Predictiva de DatosOracle Enterprise Data QualityIT Manager• Asegura SLA´s• Aumenta Confianza en ...
Join the Data Integration CommunityTwittertwitter.com/ORCLGoldenGateFacebookfacebook.com/OracleDataIntegrationOracle’s Dat...
Upcoming SlideShare
Loading in …5
×

Jose mayol integracion de datos v4 0

458 views

Published on

Presentación de José Mayol. Formato pdf.

0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
458
On SlideShare
0
From Embeds
0
Number of Embeds
2
Actions
Shares
0
Downloads
9
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide

Jose mayol integracion de datos v4 0

  1. 1. Integración de DatosManejando Datos para mejorar el NegocioAbril-2013
  2. 2. Engineered TogetherTested Together Certified TogetherDeployed TogetherUpgraded TogetherManaged TogetherSupportedTogetherEngineered TogetherTested Together Certified TogetherDeployed TogetherUpgraded TogetherManaged TogetherSupportedTogether
  3. 3. Como Integración de Datos Ayuda a mi Negocio?5 Retos actuales para Integración de DatosOn-Premise,On CloudDataQualityAny Data,Any SourceReal-TimeAnalyticsZero Downtime,MaximumPerformance
  4. 4. Big Data = Big VentajasTransactionsYOUR Data:Decisions based onyour dataBIGData:Decisions based on alldata relevant to you Machine-GeneratedDataSocial DataDocumentsAny Data,Any Source
  5. 5. Any Data,Any SourceBig Data – Mismas Técnicas de IntegraciónBig DataTransformationBulk Data,E-LTOLTP OLAP UnstructuredLegacy
  6. 6. On-Premise,On CloudCloud – Sin Impacto y Sin BarrerasOLTP OLAP UnstructuredLegacyBig DataTransformationReal-timeReplicationBulk Data,E-LTData Quality (Product & Customer Data)Service-Oriented Architecture, BPMData Services,FederationCloud Application FoundationPublicCloudPrivateCloud
  7. 7. Disponibilidad Continua – Clave en NegocioOLTP OLAP LegacyOracle GoldenGateReal-Time Replication Eliminates planned andunplanned downtime Bidirectional replication withoutdistance limitation for Active-Active implementation Supports heterogeneousdatabases and operatingsystemsZero Downtime,MaximumPerformance
  8. 8. Engineered Systems – Sin impacto• Optimized bulk loads, Leverages Infiniband, Smart Storage• No data transfer to/from separate ETL server• Transformations use Exadata optimized SQL• Native Batch And Real-Time integration capability• Zero down-time migrations to Exadata• Bridge for your Enterprise data and Big Data Appliance• Tightly integrated with Exadata, ExalyticsReal-TimeAnalytics
  9. 9. ODI and Exadata – Extrema RealidadA Disruptive Improvement in Performance A complex branch of the customer’stax allocation process runs 5 hrs 11mins during quarter close Exadata and ODI (E-LT) combinedis able to execute the process42X faster (7mins 20 secs)050100150200250300350ODI on ExadataConventional ETLJobexecutiontimeinminutes5hrs 11mins7min 20sec42XIMPROVEMENT
  10. 10. Calidad – Garantía de EficienciaCompanies Individuals ProductsDataQualityIn one hour… In one hour… In one year…• 240 businesses willchange addresses• 150 business telephonenumbers will change orbe disconnected• 20 corporations will fail• 12 new businesses willopen their doors• 5,769 individuals inthe US will changejobs• 2,748 individuals willchange address• 515 individuals willget married• On average 20%duplicates in productdata• 90% productintroductions fail• Retailers lost 40 billionor 3.5% of total saleslost each year due toitem info inefficienciesRiesgos, Fraude, LogisticaMaster data changes at rate of 2% per monthSource: D&B, US Census Bureau, US Department of Health and Human Services, Administrative Office of the US Courts,Bureau of Labor Statistics, Gartner, A.T Kearney, GMA Invoice Accuracy StudyCompounded 27% per year 104% in three years
  11. 11. Calidad – Garantía de EficienciaDataQualityRiesgos, Fraude, LogisticaFuente: El Pais Internacional – 25 de Abril de 2013“Tras varias pesquisa, la Agencia Federal no encontró nada de relevancia en esa sospecha y dejómorir el caso. “No encontramos ninguna actividad terrorista, ni doméstica ni extranjera”, ha dicho elFBI. Pero el nombre de Tamerlan Tsarnaev siguió en la lista clasificada del Antiterrorismoestadounidense. Sin embargo, una lista tan inmensa –de las más de 540.000 entradas en realidadsolo son reales 450.000, ya que en ocasiones el mismo nombre está repetido por estardeletreado de formas distintas o con pseudónimos- no ofrece la posibilidad de comprobacionescontinuas, por lo que el nombre de Tamerlan cayó en el olvido.”
  12. 12. MultiplesOrigenesMúltiplesDestinos• Tiempo Real• Alta Velocidad/Potencia• Simplicidad Desarrollo• Heterogeneidad en Fuentesy/o DestinosOracle GoldenGateReplica de Datos en Tiempo RealOracle Data IntegratorTransformación de DatosOracle Enterprise Data QualityCalidad de DatosOracle – Integración de DatosSimplicidad y Heterogeneidad en el Movimiento y Transformación de Datos
  13. 13. Oracle Data IntegratorTransformación de DatosMultiplesOrigenesMúltiplesDestinos• Tiempo Real• Alta Velocidad/Potencia• Simplicidad Desarrollo• Heterogeneidad en Fuentesy/o DestinosOracle – Integración de DatosSimplicidad y Heterogeneidad en el Movimiento y Transformación de DatosOracle Enterprise Data QualityCalidad de DatosOracle GoldenGateReplica de Datos en Tiempo Real
  14. 14. Replica de información crítica con nulo impacto en rendimiento de los sistemas origen,enrutado, transformación y envío entre entornos heterogeneos en tiempo real,asegurando transaccionalidad y fiabilidad de los datosOracle GoldenGateReplica de Datos en Tiempo Real1 Unica Tecnología  Solución Múltiples Necesidades
  15. 15. Oracle GoldenGate permite captura con impacto muy bajo, enrutado, transformación,y envío de datos transaccionales entre entornos heterogeneos en tiempo real.Aspectos diferenciadores:No intrusivo, bajo impacto, latencia <1 segundoAbierto, arquitectura modular – Soporta orígenesy destinos con tecnología heterogéneaMantiene la integridad transaccional – Fiablecontra interrupciones y caídas de servicioRendimientoFlexible y ExtensibleFiableOracle GoldenGateAspectos Diferenciadores
  16. 16. Oracle GoldenGate – Casos de UsoLa Integración en Tiempo Real – aplicaciones para la empresa•Arquitectura muy flexible•Implantaciones muy rápidas•Bajo TCO & ROI muy rápido
  17. 17. Arquitectura TécnicaDatabase(s)OrigenDatabase(s)DestinoLAN / WAN /Internet(TCP/IP)Route: Datos comprimidos, encriptados para múltiples destinos.Capture: Los cambios committed son capturados ( pueden serfiltrados) según se producen, leyendo el log de transacciones.CaptureTrail files: Almacena y encola los datos para su envíoSource TrailDelivery: Escribe los datos con integridadtransaccional, transformando los datos segúnsea necesario.Target TrailDeliveryBi-direccionalSource TrailTarget TrailDelivery CapturePumpPumpPump: Distribuye los datos para su enrutado a multiples destinos.
  18. 18. Topologías PosiblesUnidirectionalQuery OffloadingZero-Downtime MigrationBi-DirectionalHot Standby orActive-Active for HAPeer-to-PeerLoad BalancingMulti-MasterBroadcastData DistributionIntegration/ConsolidationData WarehouseBPMBAMCEPData Distributionvia Messaging
  19. 19. Databases O/S and PlatformsOracle GoldenGate Capture: Oracle DB2 UDB DB2 v10 for z/OS Microsoft SQL Server 2008 R1, R2 Sybase ASE, 15.5 Teradata Enscribe SQL/MP SQL/MX MySQL JMS message queuesOracle GoldenGate Delivery: All listed above, plus: TimesTen, IBM System I, Netezza & Greenplum ETL productLinuxSun SolarisWindows 2000, 2003, XP, 2008HP NonStopHP-UXIBM AIXIBM zSeries, iSerieszLinux27Oracle GoldenGate 11g Supported Platforms
  20. 20. Oracle GoldenGateReplica de Datos en Tiempo RealMultiplesOrigenesMúltiplesDestinos• Tiempo Real• Alta Velocidad/Potencia• Simplicidad Desarrollo• Heterogeneidad en Fuentesy/o DestinosOracle – Integración de DatosSimplicidad y Heterogeneidad en el Movimiento y Transformación de DatosOracle Enterprise Data QualityCalidad de DatosOracle Data IntegratorTransformación de Datos
  21. 21. • Capacidad de Manejar Grandes Volumenes de Datos (Millones de Registros)• Rapidez y Simplicidad de Desarrollo (Componer vs Desarrollar)• Control en Ejecución• Facilidad para Optimizar Transformaciones (Cargas Incrementales, …)• Trabajo en Equipo (Documentación, Entornos, Repositorios compartidos, …)• No costes adicionales (HW) , ni dependencia de ArquitecturasOracle Data Integrator – ODIPremisas de Partida
  22. 22. Diseño DeclarativoChange Data Capture (CDC)Transformación E-LTvs. E-T-LArquitectura modificable en calienteCualquierDataWarehouseCualquierSistema dePlanificaciónFuentesOLTP DBFuentes deAplicacionesFuentes deLegacyModulos de Conocimiento (KMs)conectablesOracle Data Integrator – ODICaracterísticas
  23. 23. • Grandes Volumenes de Datos• Rapidez y Simplicidad de Desarrollo• Control en Ejecución• Optimizar Transformaciones - CDC• Trabajo en Equipo• No costes adicionales (HW)Oracle Data Integrator – ResultadosObjetivos y Premisas de Partida
  24. 24. Oracle GoldenGateReplica de Datos en Tiempo RealOracle Data IntegratorTransformación de DatosMultiplesOrigenesMúltiplesDestinos• Tiempo Real• Alta Velocidad/Potencia• Simplicidad Desarrollo• Heterogeneidad en Fuentesy/o DestinosOracle – Integración de DatosSimplicidad y Heterogeneidad en el Movimiento y Transformación de DatosOracle Enterprise Data QualityCalidad de Datos
  25. 25. Los Datos contienen Errores e InconsistenciasMulticulturalidadIncidencias en Interacción HumanaPolimorfismo – Multiples Fuentes
  26. 26. Impacto en el Negocio de la Calidad de DatosCon Malos Datos Con Buenos Datos• Incremento del riesgo, tiempo y costede iniciativas• Efectos Intangibles peligrosos: MalaReputación, Perdida de CuotaMercado.• Gastos adicionales para negocio:Envios duplicados, Facturasincorrectas, Pedidos duplicados, …• Mejora en Beneficio:• En sistemas Existentes• Provoca extensión de Negocio• Incrementa Agilidad• Incrementa Eficiencia• Incrementa Satisfacción Cliente• Incrementa Escalabilidad“Solo el 30% de implantaciones deBI/DW son completamente exitosas.Las dos razones: LimitaciónPresupuesto y Calidad del Dato”“Integración de Datos y Calidad deDatos son prerequisitos esenciales parala implementación de ERP´s, SCM´s,MDM`s.”“La primera razón de fallo enlos proyectos de CRM es laCalidad de los Datos”
  27. 27. 6 Dimensiones de la Calidad de Datos•Que datos son incompletos o no utilizables?Completitud•Que datos están guardados en formatos no estandarizados?Conformidad•Que Datos dan información contradictoria?Consistencia•Que datos están desactualizados?Exactitud•Que Datos o atributos están repetidos?Duplicidad•Que información falta o no está referenciada?Integridad
  28. 28. Propuesta Calidad de DatosOracle Enterprise Data QualityFuentes DatosDatabasesCobol copybooksTXT filesRegistrosDescartadosDestinosOracle Data Quality for Data IntegratorGlobal DataRouterTransformer Parser PostalMatcherRelationshipLinkerEnterprise Data Quality DataWarehouseProceso de ControlCALIDAD de DATOS• PERFILADO• REPARACIÓN• CHEQUEO• ALERTA• INFORMACIÓN
  29. 29. 43 | © 2011 Oracle CorporationCapacidades ÚnicasOracle Enterprise Data QualitySolución Integradapara Calidad deDatosArquitecturaModernaDiseñado comoPlataforma• Perfecta integración de todas las capacidades de Calida de Datos(perfilado, reparación, control, automatización)• Diseñada para Usuarios de Negocio• Integra capacidades de colaboración• Muy facil de configurar e integrar como ‘DQ Services’• Arquitectura abierta y moderna (Java, SOA, etc.)• Soporte Multi proyecto y Multi usuario• Permite Innovación y Reutilización (reglas extensibles y reutilizables)• Permite una unica solución para Negocio e IT• Permite involucrar 3os de forma desacoplada en el proceso decalidad
  30. 30. Resumen Ventajas Calidad Predictiva de DatosOracle Enterprise Data QualityIT Manager• Asegura SLA´s• Aumenta Confianza en IT• Mejora la capacidad deatender con garantía lasnecesidades de Usuarios deNegocioUsuario Negocio• Mejores Decisiones• Prevención Fraude• Venta Cruzada• Mejora Visión de Empresa• Reduce Costes• Identifica nuevas opp deNegocio44
  31. 31. Join the Data Integration CommunityTwittertwitter.com/ORCLGoldenGateFacebookfacebook.com/OracleDataIntegrationOracle’s Data GoldenGate YouTube channelyoutube.com/oraclegoldengateOracle.com/goto/dataintegrationLinkedIn“Oracle Data Integration”Oracle’s Data Integration blogblogs.oracle.com/dataintegrationOracle.com/goto/dataintegration

×