Fivetran sorgt für volle Kontrolle über alle Daten: Neue Metadata API für End-to-End-Datenanalyse und -Transparenz

Mit der neuen API können Unternehmen in „Data Catalogs“ die Herkunft von Daten nachverfolgen und so komplexe Compliance-Anforderungen erfüllen. Zudem können sie den sicheren Zugriff auf die jeweils richtigen Daten in ihren Teams verwalten.

München, 20. September 2022 – Fivetran, führender Anbieter für moderne Datenintegration, präsentiert seine neuen Metadata API. Mit dieser Lösung können Unternehmen Daten über ihren gesamten Weg durch die Fivetran-Pipelines von der Quelle bis zur Destination tracken. Diese erweiterte Transparenz erlaubt es, Governance- und Observability-Tools zu integrieren. So haben Datenteams mehr Kontrolle, wer Zugriff auf welche Daten hat. Die Fivetran Metadata API bietet Data Stewards, Security- und Data-Engineering-Teams automatisierte Data Governance. Das heißt, sie bekommen den vollen Überblick darüber, woher Datensätze stammen, wer darauf zugegriffen hat und welche Änderungen in der Pipeline stattgefunden haben.

„Heute weiß jedes Unternehmen, dass es datenbasiert arbeiten muss. Aber die traditionelle Data Governance mit oft manuellen Prozessen und einer nur reaktiven Durchsetzung von Richtlinien ist ein großer Bremser in diesem Bereich. Denn sie ist kein skalierbarer Ansatz – vor allem, wenn die Dateninfrastruktur auf Tausende von Pipelines wächst“, erklärt Fraser Harris, VP of Product bei Fivetran. „Mit der Metadata API können unsere Kunden sofort Automatisierungen für ihre Data Governance und Workflows zur Datenqualität nutzen. Somit identifizieren sie Governance-Probleme proaktiv und können diese rechtzeitig angehen. Unser automatisierter In-Flight-Ansatz ermöglicht skalierbaren Datenzugriff, ohne zusätzliches Risiko für das Unternehmen.“

Gesetze wie die europäische Datenschutz-Grundverordnung (DSGVO), das kalifornische Gesetz zum Schutz der Privatsphäre von Verbrauchern (CCPA) und andere sehen Geldstrafen für Unternehmen vor, die gegen die komplexen Datenschutz-Regeln verstoßen. Die Fivetran Metadata API hilft Unternehmen, diese Compliance-Anforderungen einzuhalten. Denn diese Lösung kann man einfach in bestehende Datenschutz- und Sicherheitsstrategien integrieren. Gleichzeitig steigert sie den Wert von Investitionen in Data Catalogs und Lösungen zum Data Quality Management.

• … bekommen Data Analysts einen detaillierten Einblick darüber, woher Daten stammen und können so z.B. Wirkungsanalysen durchführen.<\/li><\/ul>
  • … können Data Stewards sicher sein, dass Endnutzer nur Zugriff auf die Daten haben, die sicher gemanagt wurden und mit den Governance-Anforderungen konform sind.<\/li><\/ul>
    • … können Security-Teams und Rechtsabteilungen Audits durchführen und so sicherstellen, dass Daten, die verschoben werden, den Unternehmensrichtlinien entsprechen.<\/li><\/ul>
      • … können Data Architects und Engineers bald Änderungen im Upstream Schema verstehen und sicherstellen, dass Downstream-Prozesse aktualisiert werden. <\/li><\/ul>

        Für ein besseres Metadaten-Management arbeitet Fivetran mit vier führenden Anbietern von Data Catalogs zusammen: Atlan, data.world, Alation und Collibra. Anwender profitieren von einer Reihe an Vorteilen:

        • Informationen zu allen Daten lassen sich in einem einzigen Data Catalog konsolidieren – das sorgt für den vollständigen Überblick und eine nahtlose User Experience.<\/li><\/ul>
          • End-to-End Verlaufsgrafiken sind auch dann für Daten verfügbar, wenn sie mehrere Systeme und Tools durchlaufen. <\/li><\/ul>
            • Durch Zentralisierung der Governance in einem einzigen Tool können die Verantwortlichen besser sicherstellen, dass Richtlinien und Prozesse auf die jeweiligen Daten angewendet werden. <\/li><\/ul>
              • Daten können bis auf Spaltenebene bis zu ihrem Ursprung nachverfolgt werden. Das unterstützt den Quality Check der Daten und sorgt für das Vertrauen, dass die Daten korrekt sind und sicher genutzt werden können.<\/li><\/ul>

                „Die Metadata API von Fivetran überbrückt die große Lücke, die es zwischen der Extraktion von Daten aus operativen Systemen hin zu modernen Analysesystemen gibt. Denn sie liefert den dringend benötigten Kontext. Die Metadata API wird der Entwicklung zuverlässiger und sicherer datenintensiver Anwendungen einen Schub verleihen. Denn sie verschafft Transparenz über Datenherkunft, Wirkungsanalysen sowie über Security- und Datenschutzaspekte“, so die Einschätzung des Daten- und Analyseexperten Sanjeev Mohan, Principal bei SanjMo und ehemals Research Vice President bei Gartner.

                „Unsere Kunden sind begeistert, dass sie dank der Metadaten von Fivetran schneller und transparenter arbeiten können und Quellen nicht mehr manuell zusammenfügen müssen“, so Prukalpa Sankar, Mitbegründer von Atlan. „Mit der neuen Metadata API können sie Metadaten jetzt aus Fivetran in Atlan übernehmen und haben damit eine wirklich automatisierte Data Governance. Diese durchgängige Datenverlaufskontrolle deckt alles ab: Von den vorgelagerten Datenquellen über das Warehouse bis hin zur Business Intelligence. Sie hilft Kunden, über umfangreiche Ursachen- und Wirkungsanalysen über komplexe Data Stacks up to date zu bleiben.“

                „Über die Schnittstelle von data.world und Fivetran können Datenproduzenten und -konsumenten die Synchronisation und das Mapping entlang aller Datenbanken, Datenquellen und Anwendungen verstehen und diesen vertrauen“, so Jon Loyens, CPO & Co-Founder bei data.world. „Gemeinsam mit Fivetran bieten wir granulare Datentransparenz, einschließlich Metadaten über Quell-Ziel-Spaltenpaaren. Das vereinfacht das Auffinden von Daten sowie die Data Governance und sorgt für nutzbare Erkenntnisse.“

                Unternehmen haben nach wie vor mit einer angemessenen Data Governance – einer Grundvoraussetzung für Compliance – zu kämpfen. Das hat eine aktuelle Studie gezeigt, bei der im Auftrag von Fivetran 550 IT-Führungskräfte und Data Scientists aus den USA, Großbritannien, Irland, Frankreich und Deutschland vom Marktforschungsunternehmen Vanson Bourne befragt wurden. 82 Prozent der Befragten in Deutschland gaben an, dass ihre Unternehmen die Rollen, Richtlinien und Standards für Data Governance verbessern könnten. In den USA waren es sogar 100 Prozent, in Frankreich sagten 90 Prozent der Befragten dasselbe, in Großbritannien und Irland waren es wie in Deutschland ebenfalls 82 Prozent.