Presentación de PowerPoint
Transcripción
Presentación de PowerPoint
BIG DATA “Desde que se cronometran las carreras, se corre más rápido” Gemma Muñoz Santa Cruz, Bolivia 2014 Gemma Muñoz www.elartedemedir.com Manual para aprender www.elartedemedir.com @sorprendida @sorprendida HACE UN BILLÓN DE: HORAS… nació el homo sapiens MINUTOS… empezó el cristianismo SEGUNDOS… se lanzó el PC de IBM BÚSQUEDAS EN GOOGLE… fue ayer Gemma Muñoz www.elartedemedir.com El 90% de los datos del mundo actual… se generó en los últimos 2 años! Cada vez tenemos más datos. Cuando se hizo más barato guardarlos que destruirlos, nació el Big Data. ¡llegó la hora de sacarle partido! Gemma Muñoz www.elartedemedir.com Es la oportunidad de encontrar ideas en los tipos de datos y contenidos para tomar acción y que los negocios sean más ágiles Gemma Muñoz www.elartedemedir.com ¿Cuál es nuestra frontera? Gemma Muñoz www.elartedemedir.com La BASE del Big Data VOLUMEN de información Las 3 Vs VARIEDAD de dicha información VELOCIDAD de tratamiento de la información y… ¿VERACIDAD? Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com El 80% del esfuerzo se produce en la integración de datos Gemma Muñoz www.elartedemedir.com … ya que la explotación de Big Data está bajo la superficie Gemma Muñoz www.elartedemedir.com BIG DATA es la frontera de una compañía para almacenar, procesar y acceder a todos los datos que necesita para operar eficazmente, tomar decisiones, reducir riesgos, servir a los clientes y cumplir objetivos de negocio. Gemma Muñoz www.elartedemedir.com Tipos de datos en Big Data SMART DATA COMBINAR (múltiples fuentes de datos off/online) IDENTITY DATA ACCIONAR (identidad física + identidad online + gustos) OPEN DATA (recopilación externa a la organización) Gemma Muñoz www.elartedemedir.com SMART DATA DATA IDENTITY DATA Gemma Muñoz www.elartedemedir.com OPEN Paso Gemma Muñoz 1: Aplicacion es www.elartedemedir.com Utilización del BIG DATA • Generar Ideas • Mejorar los procesos • Modificar cadenas de valor tradicionales • Conducir nuevos negocios de datos Gemma Muñoz www.elartedemedir.com Procesamiento de datos Real Time analytics Aprendizaje adaptativo Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Combinar datos para promover acciones Gemma Muñoz www.elartedemedir.com Combinar datos para prevenir situaciones Gemma Muñoz www.elartedemedir.com Visualización de diferentes clusters de datos Gemma Muñoz www.elartedemedir.com Diversas fuentes para formar el puzzle completo y accionar Gemma Muñoz www.elartedemedir.com Identificar clusters de datos: Según los datos que tenemos, podemos sacar conclusiones diversas sobre nuestro negocio. Seleccionar los datos cuidadosamente para disponer de todas las posibilidades. Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Datos a incluir en Open Data Gemma Muñoz www.elartedemedir.com El Big Data es… Revolución datos demográficos, datos de transacción, datos de comportamiento, datos médicos… Gemma Muñoz • Gestión de salud • Administración Pública • Telecomunicaciones • Predicciones Climáticas • Negocios • Tiempo Real • … www.elartedemedir.com Objetivo: trazabilidad del cliente Ver al cliente como un TODO Canales utilizados Uso de cada canal Perfil del cliente Productos/Servicios que interesan Perfil social media del cliente Ciclo de vida del cliente … Gemma Muñoz www.elartedemedir.com Objetivo: optimización de la estrategia Impacto real de nuestras acciones en el NEGOCIO Multicanalidad Relación entre dichos canales Mejor comprensión del consumidor Búsqueda de oportunidades Marketing de precisión … Gemma Muñoz www.elartedemedir.com Paso 2: Metodolog Gemma Muñoz www.elartedemedir.com Marco de Trabajo Big Data Gemma Muñoz www.elartedemedir.com Paso 1 Estrategia del Cliente ¿Cómo es nuestra segmentación del cliente? ¿Hay que ir más allá? ¿Puedo realizar la trazabilidad del cliente? ¿Por qué nos abandonan los clientes? Gemma Muñoz www.elartedemedir.com Paso 2 Experiencia ¿Qué insights puedo ir aprovechando? ¿Qué uso podemos hacer del realtime? ¿Qué ha funcionado anteriormente? ¿Qué no? ¿Cuál es el mejor canal para comunicarnos con los clientes? Recopilaremos todo lo necesario para el estudio de los canales y media Gemma Muñoz www.elartedemedir.com Paso 3 Gestión Financiera ¿Somos capaces de gestionar bien la atribución de conversión? ¿Cómo debemos distribuir nuestro presupuesto? ¿Puedo personalizar el impacto de publicidad en el cliente? ¿Cuál es el valor de un RT o un Me Gusta? Gemma Muñoz www.elartedemedir.com Paso 4 Infraestructura ¿Qué herramienta es la mejor para obtener los datos? ¿Qué sistema de almacenamiento necesitamos? ¿Tienen consistencia los datos? ¿Estamos seguros de la calidad de los datos? Asegurar la normalización de datos Gemma Muñoz www.elartedemedir.com Paso 5 Organización ¿Dónde encaja el Big Data en la organización? ¿Debe estar centralizado en un servicio transversal? ¿O en cada una de las líneas de negocio? Gemma Muñoz www.elartedemedir.com Beneficio Evaluación Esfuerzo vs. Beneficio Integración Directa de datos Integración Selectiva de datos Datos ya existentes Quizás no vale la pena Esfuerzo Gemma Muñoz www.elartedemedir.com Mejores Prácticas Partir siempre de preguntas e hipótesis Pensar en indicadores y dimensiones Construir infraestructura flexible y escalable No almacenar por almacenar: análisis continuo Gemma Muñoz www.elartedemedir.com DATOS DATOS NEGOCIO NEGOCIO Gemma Muñoz www.elartedemedir.com Diferencias entre correlación y causalidad Gemma Muñoz www.elartedemedir.com Una masa de 1.500 kg se aproxima a tu cabeza a 45 m/seg CUIDADO !!!!!! Precisión Significancia Diferencias entre precisión y significancia Gemma Muñoz www.elartedemedir.com Diferencias entre precisión y exactitud Gemma Muñoz www.elartedemedir.com Negocio Objetivos Estrategia Comunica: Provee: Conocimiento, Recomendaciones Centro de Competencia s de Análisis BIG DATA Analítica Información estadística Pensamiento analítico Resolución problemas Síntesis Requerimientos de negocio y objetivos Tecnología Provee: Datos, herramientas Gemma Muñoz www.elartedemedir.com Capacidades tecnológicas Tagging, BI, Arq. de la Información LA CLAVE DEL ÉXITO datos desestructurados conceptualización de los datos establecer objetivos selección herramientas evaluación esfuerzo/bene ficio análisis control de calidad No se trata de los datos. Se trata del IMPACTO Gemma Muñoz www.elartedemedir.com experiencia Paso 3: Tecnologías Gemma Muñoz www.elartedemedir.com No por tener muchos datos se accede al conocimiento Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Big Query Gemma Muñoz www.elartedemedir.com La potencia sin control, no sirve Gemma Muñoz www.elartedemedir.com Tecnología dominante: HADOOP Almacenaje y procesamiento barato y a escala Crece al 60% anual. Constante. Gemma Muñoz www.elartedemedir.com Cómo es por dentro Hadoop Hadoop se compone por 4 módulos: Common: Librerías y utilidades principales HDFS: filesystem de alta disponibilidad YARN: Plataforma de gestión de recursos Map-Reduce -> Motor de extracción (y programación) Gemma Muñoz www.elartedemedir.com Api Twitter Api Facebook Api GA ID cliente Open Data Potencia del Map (..) Reduce (..) Gemma Muñoz www.elartedemedir.com Ejemplo práctico Gemma Muñoz www.elartedemedir.com Diferencias métodos de extracción de datos Gemma Muñoz www.elartedemedir.com Tecnologías complementarias Gemma Muñoz www.elartedemedir.com Bases datos columnares + Analytics in-database Aprovechamiento de procesamiento masivo en paralelo (MPP) Transformación de datos en conocimiento Volumen soportado a nivel TBs Modelos de predicción (predictive model markup language PMML) Almacenamiento memoria RAM Facilidad de administración y lectura Gemma Muñoz Contendientes: Aster Data, Vertica, Netezza, Greenplum (EMC), ParAccel, SAP Sybase www.elartedemedir.com Ejemplo de problema Gemma Muñoz www.elartedemedir.com Ejemplo de estrategia Gemma Muñoz www.elartedemedir.com Ejemplo de Big Data ONLINE Gemma Muñoz www.elartedemedir.com Ejemplos inspiradores Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com wifi + moviles + tarjeta de red tiene un número mac (macid)+ se la enchufa a la cookie para generar páginas vistas en GA para la tienda online Offline & Online http://www.doctormetrics.com/2013/05/30/ta ggingbox-gauc-2013/ Gemma Muñoz www.elartedemedir.com http://techblog.netflix.com/2012/04/netflix-recommendations-beyond-5-stars.html Gemma Muñoz www.elartedemedir.com http://www.xatakaon.com/p2p-y-descargas/iron-maiden-aprovecha-las-descargasilegales-para-saber-donde-hacer-conciertos Gemma Muñoz www.elartedemedir.com Digital Assistants: Aprendizaje adaptativo Búsqueda de datos real time ¿Qué será lo próximo? Gemma Muñoz www.elartedemedir.com Objetivo: Reducción 50% portabilidades Sistemas Cobro (propio) Apis de Redes Sociales Splunk Oferta personalizada a cada cliente en función de su valor según expectativas de negocio y permanencia http://blogginzenith.zenithmedia.es/big-data-tres-casos-de-exito-t-mobile-unilever-y-moneyball/ Gemma Muñoz www.elartedemedir.com Transmisión del Conocimiento Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com Visualización datos http://www.ted.com/talks/hans_rosling_shows_the_best_stats_you_ve_ever_seen Gemma Muñoz www.elartedemedir.com RESUMEN DEL WORKSHOP DE HOY Gemma Muñoz www.elartedemedir.com Gemma Muñoz www.elartedemedir.com El BIG DATA es solamente el comienzo de la carrera. Es pensar en nuevos modelos de negocio basados en las necesidades del futuro. Gemma Muñoz www.elartedemedir.com GRACIAS Gemma Muñoz www.elartedemedir.com