Lago Delta: En marcha

Capítulo 10. Construir una casa en el lago Delta

Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: [e-mail]

El Capítulo 1 introdujo el concepto de lago de datos, que combina los mejores elementos de un almacén de datos tradicional y un lago de datos. A lo largo de este libro has aprendido sobre las cinco capacidades clave que ayudan a habilitar la arquitectura lakehouse: la capa de almacenamiento, la gestión de datos, la analítica SQL, la ciencia de datos y el aprendizaje automático, y la arquitectura medallón.

Antes de sumergirnos en la construcción de una casa en el lago Delta, repasemos rápidamente la evolución de la gestión y el análisis de datos del sector:

Almacén de datos

Desde la década de 1970 hasta principios de la década de 2000, los almacenes de datos se diseñaron para recopilar y consolidar datos en un contexto empresarial, proporcionando soporte para la inteligencia y el análisis empresarial. A medida que crecían los volúmenes de datos, también aumentaban la velocidad, la variedad y la veracidad. Los almacenes de datos se enfrentaban al reto de abordar estos requisitos de forma flexible, unificada y rentable.

Lago de datos

A principios de la década de 2000, el aumento de los volúmenes de datos impulsó el desarrollo de los lagos de datos (inicialmente en las instalaciones con Hadoop y más tarde con la nube), un repositorio central rentable para almacenar cualquier formato de datos a cualquier escala. Pero, ...