Databricks-Lakehouse-Federation im Unity-Catalog ist jetzt allgemein über AWS, Azure und Google-Cloud verfügbar. Unternehmen können alle ihre Daten an einem Ort finden, abfragen und verwalten. Mit dieser GA-Version erhalten Unternehmen mehr Stabilität, Sicherheit und Fähigkeiten für ihre föderierten Workloads.
Unternehmen auf der ganzen Welt, unabhängig von Größe und Branche, nutzen Daten und KI, um Innovationen voranzutreiben. Aus historischen, organisatorischen oder technologischen Gründen sind die Daten jedoch oft über mehrere operative und analytische Systeme verstreut. Diese Fragmentierung führt zu den drei folgenden Herausforderungen:
- Die Schwierigkeit, alle Daten zu finden und auf sie zuzugreifen.
- Die langsame Ausführung aufgrund von technischen Engpässen.
- Eine unzureichende Konformität zwischen den einzelnen Systemen.
Lakehouse-Federation geht auf diese kritischen Punkte ein und macht es für Unternehmen einfach, siloartige Datensysteme als Erweiterung ihres Lakehouses offenzulegen, abzufragen und zu verwalten. Mit diesen neuen Funktionen sind Unternehmen in der Lage:
- Einen einheitlichen Überblick über den Datenbestand aufzubauen: Sie klassifizieren und erkennen automatisch alle strukturierten und unstrukturierten Daten an einem Ort, so dass alle Mitarbeiter des Unternehmens sicher auf alle verfügbaren Daten zugreifen und diese analysieren können – unabhängig davon, wo sie gespeichert sind.
- Alle Daten mit einer einzigen Engine effizient abfragen und kombinieren: Sie können Ad-hoc-Analysen und Prototyping in allen Daten-, Analyse- und KI-Anwendungsfällen auf den vollständigsten Daten beschleunigen. Es ist keine Ingestion erforderlich und alles läuft mit einer einzigen Engine. Die fortschrittliche Abfrageplanung über alle Quellen hinweg und die Zwischenspeicherung gewährleisten eine optimale Abfrageleistung, selbst wenn mit einer einzigen Abfrage auf Daten von mehreren Plattformen zugegriffen und diese kombiniert werden.
- Schutz von Daten über Datenquellen hinweg: Mit einem einzigen Berechtigungsmodell können Zugriffsregeln festgelegt, angewendet und alle Daten über Datenquellen hinweg geschützt werden. Regeln wie Sicherheit auf Zeilen- und Spaltenebene, Tag-basierte Richtlinien und zentralisiertes Auditing können konsistent über alle Plattformen hinweg angewendet werden.
Die allgemeine Verfügbarkeit gilt für MySQL, PostgreSQL, Amazon-Redshift, Snowflake, Azure-SQL-Database, SQL-Server und Azure-Synapse-Konnektoren. Über 5.000 Databricks-Kunden nutzen bereits Lakehouse-Federation, um ihre Datenbestände zu vereinheitlichen und eine konsistente Datenerkennung und -verwaltung zu gewährleisten.
#Databricks
