Orchestration de pipeline de données grâce à Argo Workflows

tech.willhaben.at

💡 Deux grands frameworks se distinguent généralement dans l'automatisation de pipelines : Luigi et Airflow.

L'équipe tech de Willhaben, une marketplace autrichienne, explique ici pourquoi son choix s'est plutôt porté sur Argo Workflows. Elle détaille son utilisation dans les parties load et transform, et comment elle s'intercale entre un Data Lake sur S3, un Data Warehouse qui n'est autre que Snowflake et Tableau pour tout ce qui est Dashboarding.

Lire...
Linkedin

Voulez-vous recevoir plus de contenus comme celui-ci dans votre boîte aux lettres ?