Rivery lance la nouvelle génération de CDC
juin 2022 par Marc Jacob
Rivery dévoile les capacités de Change Data Capture (CDC) de nouvelle génération en concordance avec le Data Cloud Snowflake lors du Snowflake Summit 2022. Cette nouvelle solution permettra de gagner en efficacité dans la mise à jour des données entre les bases de données et le Data Cloud Snowflake.
Le Change Data Capture de Rivery synchronise automatiquement et en temps réel les modifications apportées aux bases de données avec Snowflake Data Cloud. Il utilise le streaming en temps quasi réel pour synchroniser une base de données avec un entrepôt de données en cloud en utilisant les meilleures pratiques à la demande de chaque base de données. En analysant les logs des bases de données, le CDC détecte les changements de données au moment où ils se produisent et synchronise immédiatement ces changements avec le Data Cloud Snowflake. Il permet ainsi d’accélérer les projets de données et de minimiser les dépenses en ressources par rapport au modèle traditionnels qui reposaient sur la lecture en vrac des données et l’envoie de batch. Ces facteurs rendaient l’intégration des données plus difficile, les ingénieurs de données perdant beaucoup de temps à configurer les sources.
Les logs des bases de données sont analysés pour suivre les modifications, ce qui n’ajoute aucune charge SQL supplémentaire au système. En outre, la sélection en vrac devient une chose du passé puisque seules les données modifiées sont synchronisées avec le datawarehouse en cloud. La saisie des données de modification de Rivery est streamé dans une zone de transit d’un client. En exploitant cette zone de transit, Rivery garantit des changements en temps réel tout en se conformant aux meilleures pratiques en matière de datawarehouse cloud, ce qui permet de réaliser d’importantes économies.
Par ailleurs, le Change Data Capture enregistre les modifications des métadonnées, de sorte que les équipes n’ont pas à les suivre manuellement. Les clients n’ont pas à modifier les structures des tables. Cette fonctionnalité fait également office d’archive des données historiques, y compris pour les lignes supprimées.
En outre, Rivery annonce que Snowflake lui a décerné la nouvelle reconnaissance SPN Industry Competencies in Media.