Construcción de un pipeline para caracterización de redes estelares, utilizando Kedro

Abstract

El trabajo expone los pasos necesarios para implementar un pipeline de procesamiento de datos utilizando el framework Kedro, destinado al preprocesamiento de datos astronómicos, a fin de realizar una caracterización de grupos estelares, tendientes a determinar si el set de datos objetivo conforma una red de mundo pequeño. Se detallan las características de la herramienta utilizada, así como los criterios analizados para su adopción, a la vez que los pasos de consulta y descarga de datos, definición de etapas de preprocesamiento, implementación de las mismas, ejecución y resultados finales. Asimismo se analizará en las conclusiones, el valor que estas herramientas aportan a la repetibilidad y confiabilidad, tanto de las etapas de preprocesamiento de información, como de la analítica de datos que con posterioridad se realiza sobre dicha información, tendiente a obtener flujos de análisis de datos confiables, repetibles y de alta calidad analítica.

This paper presents the steps required to implement a data processing pipeline using the Kedro framework for preprocessing astronomical data to characterize stellar groups and determine whether the target dataset constitutes a small-world network. The tool’s characteristics and the criteria analyzed for its adoption are detailed, along with the steps for querying and downloading data, defining preprocessing stages, their implementation, execution, and final results. The conclusions also analyze the value that these tools contribute to the repeatability and reliability of both the data preprocessing stages and the subsequent data analytics performed on said data, aimed at obtaining reliable, repeatable, and high-quality data analysis flows.