Análisis de compras públicas de Chile
807.597 licitaciones y más de 30 GB procesados en streaming, con pronóstico a 2028.
- 807.597 licitaciones
- 30 GB en streaming
- Pronóstico a 2028
- Python
- ETL en streaming
- Parquet
- Prophet
- XGBoost
- GitHub Actions
Detalle de Análisis de compras públicas de Chile: problema, solución y resultado
- Problema
- Los datos abiertos de ChileCompra superan los 30 GB en archivos mensuales con formatos inconsistentes: no caben en memoria ni se pueden analizar directamente.
- Solución
- Pipeline reproducible de descarga masiva, ETL en streaming por bloques hacia Parquet, limpieza, ingeniería de variables, un índice de oportunidad de mercado y pronóstico con Prophet y XGBoost. El sitio de resultados se publica solo con cada cambio.
- Resultado
- 807.597 licitaciones analizadas (2019–2025), más de 15 millones de registros procesados, pronóstico 2025–2028 y más de 12 visualizaciones, incluido un diagrama Sankey interactivo.
