CDC Splitter SSIS

Conçu pour les ingénieurs de données et les développeurs ETL, cet outil modélise et valide la façon dont les événements Change Data Capture (CDC) sont répartis et routés au sein des pipelines SSIS.
Il définit un schéma d’événements CDC, un moteur de règles de routage et un comportement de routage par défaut pour assurer une livraison déterministe des changements vers les cibles en aval.
Conceptionnellement, les événements issus des flux CDC sont évalués selon des règles prioritaires qui mappent à une ou plusieurs destinations SSIS, en préservant l’ordre source et en permettant le traitement parallèle lorsque c’est approprié.
L’outil met l’accent sur l’exactitude, la traçabilité et la réutilisabilité des configurations de routage, et prend en charge des scénarios tels que le routage par table, le routage par opération et les filtres sur les colonnes ou les valeurs.
Sa valeur unique provient de la priorité explicite des règles, des ensembles de règles exportables pour des modèles de paquetages et de la validation intégrée permettant d’identifier les conflits avant le déploiement.
Les cas d’utilisation comprennent les chargements incrémentiels, la réplication multi-cibles et les transformations par étapes où différents systèmes en aval nécessitent des vues CDC distinctes.
Les fonctions centrales incluent un schéma d’événements CDC, un moteur de règles, un routage par défaut et des hooks d’audit.
Les sorties consistent en flux répartis et un journal d’audit avec les décisions et le statut de routage, aidant les opérateurs à vérifier la couverture et les performances.
Cet outil s’adresse aux ingénieurs de données travaillant avec SQL Server CDC et SSIS ou des écosystèmes ELT similaires, permettant des conceptions plus rapides, moins d’erreurs de routage et une meilleure maintenabilité des pipelines CDC.