CA | ES | EN

Marc Planagumà | SCRM-LIDL Digital Hub

Head of Data Engineering
marc planaguma lidl

Marc Planagumà | SCRM-LIDL Digital Hub

Head of Data Engineering

Biografía

Marc Planagumà es Head of data engineering en el SCM-LIDL Digital hub. Ingeniero de datos sénior experto en la creación y gestión de plataformas y equipos altamente escalables para análisis avanzados. Su enfoque actual de trabajo es diseñar y construir la plataforma central de big data para LIDL Group. También trabajó en la aseguradora Zurich como Platform Manager y anteriormente, en instituciones de investigación como Eurecat, Berlin Big Data Center, Barcelona Digital y Telefónica R&D.

PONENCIA: COMO CONSTRUIR UNA PLATAFORMA DE DATOS ÁGIL Y ESCALABLE EN UNA GRAN EMPRESA

La creación de una plataforma de análisis de datos propia es una decisión cada vez más común en los sectores empresariales y productivos. Esta es una práctica que ya hace tiempo que se lleva a cabo a nivel de investigación y en empresas nativas digitales pero es relativamente reciente en grandes entreprise. Desde los años 90 el IT ha sido externalizado de las grandes empresas pero el boom de la análisis de datos ha chocado con esta estrategia.

El incremento de perfiles datascience a las grandes empresas ha hecho cada vez más evidente la necesidad de tener más y mejores datos para analizar. Pero sobre todo en el momento de querer llevar soluciones analíticas avanzadas a producto de datos en producción, se ha evidenciado que la escala de volúmenes de datos, clientes y requerimientos que tienen las grandes empresas dejan obsoletas las soluciones monolíticas y externalizadas para el tratamiento de datos.

El paisaje de analítica big data se ha diversificado en miles de soluciones mayoritariamente opensource donde los big players proveedores de tratamiento de datos han dejado de liderar el mercado. Las empresas nativas digitales han apostado por crear en muchos casos su propia tecnología, que incluso han liberado de forma publica. En el caso de las statups en gran medida apuestan por diseñar sus propias arquitecturas a base de integración de diferentes soluciones publicas opensource y/o servicios Paas/SaaS con gran agilidad de cambio tecnológico y estratégico. En el caso de las Enterprise se hace inevitable construir una plataforma propia de datos capaz de interoperar con todos los datos de la empresa y dar el servicio de disponibilidad, calidad y escalabilidad sobre los datos. Esto pone sobre la mesa varios retos para una empresa grande:

  • El insourcing del conocimiento tecnológico y del dominio de los datos con la construcción de equipo y cultura propia.

  • La protección de la agilidad en el diseño, construcción y despliegue de las soluciones en iteraciones rápidas, con una estrategia Lean y fail past.

  • Independencia y poder de decisión como plataforma desde la infraestructura, el toolstack, la arquitectura, el ALM y hasta el propio producto de datos.

En la ponencia explicaremos el caso de éxito de cómo hemos construido una plataforma de datos desde su arquitectura, equipo, metodología y organización dentro de una Enterprise como LIDL. Como hemos sido capaces de ser ágiles, autónomos y autosuficientes para construir en un corto plazo de tiempo una plataforma de datos que habilita a todos los equipos y departamentos de LIDL crear productos de datos escalables y robustos. Como hemos creado, adaptado y transformado las metodologías y protocolos de una enterprise para ser capaces de tener la agilidad de una startup pero siguiendo proporcionando la robustez y seguridad que demanda una gran empresa.

Sesiones: Marc Planagumà | SCRM-LIDL Digital Hub