Negofin
Data Lakehouse corporativo sobre AWS para unificar la inteligencia de negocio
Nublit diseñó un Data Lakehouse serverless sobre AWS que unifica los datos de Wally, Oita y Crediagil en una única fuente de verdad, con gobierno y seguridad de punta a punta. La plataforma, desplegada en 180 horas, sienta las bases para scoring crediticio y Machine Learning, y hoy se opera 24x7.
Sobre el Cliente
Negofin es una empresa paraguaya de servicios financieros que opera con múltiples sistemas de gestión on-premise (Wally, Oita y Crediagil) distribuidos en distintos datacenters propios. Con un volumen creciente de datos transaccionales y operativos dispersos entre plataformas heterogéneas, la empresa necesitaba consolidar toda esa información en una única plataforma analítica moderna con trazabilidad, gobierno y capacidad de escalar hacia modelos de riesgo e inteligencia artificial.
https://www.negofin.com.py/ ParaguayNecesidades
Consolidar datos de múltiples sistemas en una sola fuente de verdad Wally, Oita y Crediagil operaban de forma independiente, generando datos desconectados sin posibilidad de análisis integrado. Cada reporte requería trabajo manual de extracción y cruce, con alto riesgo de inconsistencias.
Reemplazar un modelo de Data Warehouse tradicional por una arquitectura moderna y escalable El modelo convencional implicaba altos costos de infraestructura, rigidez en el esquema de datos y poca flexibilidad. Negofin buscaba una solución serverless que creciera con el negocio sin requerir administración de servidores.
Asegurar gobierno, trazabilidad y seguridad sobre los datos financieros Al tratarse de datos sensibles del negocio financiero, era imprescindible contar con control granular de acceso, historial de versiones de datasets, gestión segura de credenciales y monitoreo continuo.
Construir la base para analítica avanzada, scoring y Machine Learning Más allá del reporting, Negofin buscaba sentar las bases para modelos de riesgo crediticio, scoring y analítica predictiva que requieren una plataforma de datos bien estructurada y gobernada desde el origen.
¿Qué se hizo?
Arquitectura Lakehouse con modelo Medallion sobre AWS
Nublit diseñó e implementó una arquitectura Lakehouse moderna basada en el modelo Medallion de tres capas: Bronze (datos crudos), Silver (datos depurados y transformados) y Gold (datos modelados y listos para consumo analítico). El almacenamiento se implementó sobre Amazon S3 Tables con Apache Iceberg, que aporta control transaccional, versionado de datasets y capacidad de recuperación de versiones históricas.
Ingesta segura desde sistemas on-premise vía VPN Site-to-Site
Se configuró conectividad privada entre los datacenters de Negofin y la plataforma AWS mediante VPN Site-to-Site, con extracción de datos desde PostgreSQL on-premise a través de AWS Glue Connections. Todo el tráfico de datos viaja por canales privados sin exposición a internet.
ETL, transformación y orquestación serverless
El procesamiento se implementó con AWS Glue para los jobs de ingesta y transformación, DBT con Cosmos para el modelado estructurado Bronze → Silver → Gold, y Glue Data Catalog como repositorio centralizado de metadatos. La orquestación y scheduling de todos los pipelines se gestionó con Amazon MWAA (Airflow administrado).
Consultas analíticas 100% serverless con Amazon Athena
La capa de consumo se construyó sobre Amazon Athena Engine v3, permitiendo consultas SQL ad-hoc sobre los datos Iceberg sin necesidad de aprovisionar ni administrar infraestructura de cómputo. El modelo es completamente pay-per-query.
Gobierno de datos con AWS Lake Formation y seguridad end-to-end
Se implementó AWS Lake Formation para el control granular de acceso a nivel de tabla y columna, AWS Secrets Manager para la gestión segura de credenciales, AWS KMS para cifrado de datos en reposo, y Amazon CloudWatch con alertas automáticas para monitoreo y trazabilidad de todos los pipelines.
Infraestructura como Código con Terraform en tres entornos
Toda la plataforma fue desplegada mediante Terraform en tres entornos diferenciados (DEV / TEST / PROD), garantizando reproducibilidad, consistencia y control de cambios. El proyecto se ejecutó en 180 horas.
O&M 24x7 con equipo especializado en Data y Cloud
Una vez productiva la plataforma, Nublit asumió la operación y mantenimiento con cobertura 24x7, incluyendo monitoreo de pipelines, gestión de incidentes con SLA definido, administración IAM, FinOps sobre el consumo AWS, y horas para proyectos evolutivos. El equipo combina perfiles de Cloud Architecture con Data Architect, Data Engineer Senior y DataOps / Analytics Engineer.
Resultados
Una única fuente de verdad para todo el negocio financiero:
Negofin consolidó los datos de Wally, Oita y Crediagil en una plataforma unificada, eliminando silos y procesos manuales de cruce.
Plataforma analítica productiva, serverless y sin administración de servidores:
la arquitectura Lakehouse opera en producción escalando automáticamente según la demanda.
Datos con historial, versionado y gobierno granular:
Apache Iceberg garantiza trazabilidad completa de cada dataset, con posibilidad de consultar versiones históricas y auditar cambios.
Base lista para scoring crediticio, modelos de riesgo y Machine Learning:
la capa Gold expone datos limpios, modelados y gobernados, listos para consumo por herramientas de BI y modelos predictivos.
Reducción de costos frente al modelo tradicional de Data Warehouse:
el modelo pay-per-use eliminó la necesidad de inversión inicial en infraestructura fija.