Entorno de Datos en Microsoft Azure

Entorno de Datos en Microsoft AzureJOSE REDONDOCEO | DATA ARCHITECT - ENTORNODB LLCMICROSOFT DATA PLATFORM MVP

Quien soy?Microsoft Data Platform MVPCEO | Data Architect - EntornoDB LLC

Twitter: @redondojLinkedIn: linkedin.com/in/redondojBlog: redondoj.wordpress.comE-Mail: redondoj@entornodb.onmicrosoft.com

AgendaEvolucinArquitecturaServiciosEscenarios

- EvolucinInteligencia de NegociosVersionesRequerimientos y Necesidades de NegociosHerramientas

-- Inteligencia de NegocioConjunto de tcnicas para la transformacin de datos.Conjunto de herramientas tecnolgicas para extraer y obtener el significado de los datosEntorno de informacin para propsitos analticos.

--- Versiones1.0 Requerimiento de informacin empresarialConsultas en bases de datos y bodegas de datos Provisionar de reportes empresarialesEntrada de datos a Clientes (Reportes Stand Alone)Procesamiento por lotesUso de herramientas BI (Sola para grupos o comunidades de personas)Control exclusivo IT

--- Versiones2.0 Explorar rangos de datosPermite combinaciones de datos sin obtener resultado interactivosEscenarios tecnolgicos ERPCRMBodegas de datosValidar informacin desde un punto de vistaHerramientas BI centralizadas en reportesBI 2.0 Creacin y entrega por usuarios finales (Analistas BI)En tiempo real desde cualquier dispositivo con Web PortalExplorar datosControl Hibrido

Web 2.0Web PortalExplorarPredecir

--- Versiones2.5 Puede utilizar cualquier herramienta BIPuede mezclar datos rpidamente (Si se encuentran disponibles)Desarrollo sencillo y simple

PERO AHORA

BI 2.0 ++Agile BI, SOA, Bsquedas empresariales, VisualizacinDar mas poder con las herramientas BI Mas dinmico para IT

CONJUNCION DE DATOS EN MARCHA

--- Versiones3.0 Colaborativo desde cualquier dispositivo con contenidoAprovecha la informacin sobre la marchaConduce a resultados inmediatos

Centralizado en grupos de trabajo de colaboracinGestin de datos administrados automticamenteInteractivo entre clientes, empleados y tercerosNo genera cuellos de botella a ITEscenarios de datos incluidos: Big Data, Cloud, etc

Creacin, Entrega y Gestin para consumidores de datos

Enriquecer

Anticipar

Seft-Service BI con Analytic 3.0

Mapa en el TiempoBI 1.0BI 2.0BI 3.0FuncionalidadPresentada / AgregadaExplorable / PredectibleAnticipada / EnriquecidaFrecuenciaMensualmente /DetalladaSemanalmente /Diariamente / SumarizadaEn tiempo real / ProcesadaNivel de enfoqueComunidadEmpresarialColaborativaProcesamientoPor lotesCerca al Tiempo realEn ProcesoProductos en DatosInformacionInteligenciaConocimientoBase / InfluenciaEntregada solamenteCreada y EntregadaCreada, Entregada y Automatizada

-- Requerimientos y Necesidades de NegociosConjunto de herramientas y tcnicasEntrega automtica sin gestin de usuariosEntrega la informacin a los usuarios en tiempo realEnfocado en escalabilidad y usabilidadProvee autogestin en la creacin, entrega y anlisis de contenidoSoporta innumerable interfaces de usuarios multidispositivo en cualquier lugar y momentoConstruida sobre la metodologa de colaboracinIncluye Analytics 3.0, Data Discovery, Advanced Visualization, Visual Analytics, Business Discovery, Self Serve Business entre otros

-- Requerimientos y Necesidades de NegociosComprendiendo la necesidades

La tecnologa debe estar en su lugar para permitir a la organizacin adquirir, almacenar, combinar y enriquecer enormes volmenes de datos no estructurados y estructurados en formato RAW

Capacidad de realizar anlisis, escalar datos en tiempo real y casi en tiempo real, sobre estos enormes volmenes de forma iterativa

-- HerramientasHojas de clculos

Bases de datos

Data Mart

Bodegas de datos

2017

DEMO

- ArquitecturaHerramientas emergentes del Big DataBig Data HadoopPlataforma AnalticaBodega de datosTradicionalModerna

-- Herramientas emergentes del Big Data

-- Big Data Hadoop

Plataforma AnalticaMineria de datos

-- Plataforma AnalticaVisualizacion y Data Discovery

Como aplicar el entorno apropiado a nuestras necesidades empresariales

-- Bodega de datosTradicional

OLTP Data SourcesStagingArea 1StagingArea 2StagingArea 3

Data Warehousereas EmpresarialesEsquema Estrella

Data Mart 1

Data Mart 2

MultiDimensionalTabularCapa de VisualizacinSSISSSISSSISSSISSSISProcesamiento deCubosData AtmicaProcesamiento deCubos

StagingMirror OLTPEDW

Data Warehouse(Normalizado)

Corporate InformationFactory (CIF)Datos AtmicosSSISSSISSSIS

-- Bodega de datosModerna

-- Bodega de datos

DEMO

- ServiciosData LakeBodega de datos

-- Data Lake

-- Data Lake

-- Data Lake

-- Data Lake

-- Data LakeTenemos que olvidarnos de las bodegas de datos?

Data Lake se esta convirtiendo en la prioridad corporativa de las grandes empresas puesto que llenan una brecha critica

Que es Data Lake?

Un nico lugar para almacenar todo tipo de datos en su formato nativo, sin lmites fijos en el tamao de la cuenta o del archivo, teniendo alto rendimiento en el aumento de la ejecucin analtica y la integracin nativa con el ecosistema de Hadoop

-- Data Lake

-- Data Lake

Como trabaja Data Lake?

-- Bodega de datos

-- Bodega de datos

-- Bodega de datosBODEGA DE DATOSDATA WAREHOUSEvs.LAGO DE DATOSDATA LAKEEstructurado, ProcesadoDATAEstructurado,Semi-Estructurado,No estructurado,RAWSchema-On-WritePROCESAMIENTOSchema-On-ReadCostoso para grandes volumenes de datosALMACENAMIENTODiseado para almacenamiento de bajo costoConfiguracin ligera y fijaFACILIDAD DE USOConfiguracin altamente robusta y reconfiguracin necesaria segn requerimientosMaduroSEGURIDADMadurandoProfesionales empresarialesUSUARIOSCientficos de datos

Origenes de DatosAdquisicin de DatosAlmacenamiento de DatosAnlisis de DatosReporte y VisualizacinERMCRMOLAPETLAlmacen de DatosBI Analytics

TRADICIONAL BODEGA DE DATOS EMPRESARIAL

- EscenariosBig Data AnalyticsMicrosoft Data Factory

-- Big Data Analytics

-- Microsoft Data Factory

-- Microsoft Data Factory

DEMO

Preguntas y Respuestas

Muchas gracias por su atencin