Azure Data Factory
La technologie
Azure Data Factory est le service d'intégration de données de Microsoft Azure : orchestration de pipelines, connecteurs vers les sources applicatives et cloud, transformations et planification.
Les pipelines créés dans l'interface deviennent vite difficiles à maintenir. Le passage à l'échelle suppose un déploiement as-code, des environnements séparés et une supervision des flux.
Interventions
Missions Visian sur Azure Data Factory
- Conception et développement de pipelines d'ingestion
- Déploiement as-code (ARM, Bicep, Terraform) et CI/CD entre environnements
- Migration depuis Talend, SSIS ou des scripts historiques
- Supervision, alerting et analyse des coûts d'exécution
- Intégration avec Azure SQL, Synapse, Fabric ou Databricks
Ces missions s'inscrivent dans l'expertise Plateforme data, au forfait, en régie ou en centre de service.
Références
Cas clients
- Transavia · Aérien, Data Engineering
Questions fréquentes
Azure Data Factory : questions fréquentes
Azure Data Factory ou Microsoft Fabric ?
Fabric intègre Data Factory avec le stockage OneLake et Power BI. Pour un existant Azure déjà structuré, Data Factory seul reste pertinent ; pour un nouveau socle Microsoft, Fabric simplifie l'ensemble.
Peut-on migrer des flux Talend vers Azure Data Factory ?
Oui. La migration commence par un inventaire des flux, leur rationalisation, puis une réécriture par lots avec des tests de non-régression sur les données.