Diseño e implementación de datalake corporativo para consorcio

Abstract

La gerencia Advanced Analytics de Consorcio fue formada con el principal propósito de utilizar datos para realizar modelos de machine learning, pero con el tiempo fueron adjudicándose el trabajo de realizar distintos desarrollos con datos, de esta forma fueron almacenando cada vez más datos de distintas lineas de negocio, convirtiéndose en una especie de repositorio de datos para la compañía, algo para lo cual no estaban preparados. Debido a lo anterior descrito, este trabajo resuelve parte del problema implementando un data lake corporativo, y un caso de uso que valida la solución implementada. A partir de esta implementación y validación se puede verificar que la principal ventaja obtenida es la estandarización de procesos, lo cual proporciona confianza en los datos almacenados y mayor rapidez al desarrollar nuevos proyectos.