Stackable veröffentlicht eine neue Version 24.3 der Open-Source-Datenplattform “Stackable Data Platform” (SDP).
Die SDP ist eine Plattform, die weltbekannte Open-Source-Werkzeuge aus dem Bereich der Datenverarbeitung unter einem gemeinsamen Dach zusammenführt. Diese Werkzeuge werden so angepasst, dass sie auf Kubernetes betrieben werden können.
Die Plattform deckt den gesamten Datenverarbeitungsprozess ab: von der Orchestrierung mit Apache Airflow, über Ingestion mit Apache NiFi und Apache Kafka, bis hin zur Datenspeicherung durch Apache Druid, Apache HBase und Apache Hadoop HDFS. Für die Datenverarbeitung werden Trino und Apache Spark eingesetzt, während die Visualisierung durch Apache Superset erfolgt. Somit bietet die SDP alle Komponenten, die für eine moderne Datenplattform erforderlich sind.
Ergänzt wird das Angebot durch ein mit Prometheus kompatibles Monitoring, umfassende Authentifizierungsmöglichkeiten und eine Policy-as-Code-Autorisierung mittels Open Policy Agent.
Neue SDP Version mit mehr Sicherheit
Neuerungen in der Sicherheit:
- Autorisierung durch Open Policy Agent (OPA): In dieser Version wurden die Autorisierungsfunktionen durch den Einsatz des OPA erweitert, um eine regelbasierte Durchsetzung von Richtlinien zu ermöglichen. Ein besonderer Fokus liegt auf der Integration mit Trino und HDFS, die nun erweiterte Möglichkeiten zur Zugriffskontrolle bieten. Unter anderem erlaubt Trino nun Row Level Security und Data Masking.
- Einheitliches Identitätsmanagement: Der neue “User Info Fetcher” erlaubt auch die Autorisierung auf Gruppenebene über OPA abzubilden. Aber auch andere Merkmale von Nutzern können aus Verzeichnisdiensten abgerufen werden.
- Ausweitung der Authentifizierungsoptionen: Die Unterstützung für Kerberos und OpenID Connect (OIDC) wurde ausgebaut, um eine breitere Palette von Authentifizierungsszenarien abzudecken, was eine sichere und vereinfachte Benutzererfahrung gewährleistet.
Innovationen im Schwachstellenmanagement:
- Einführung von Software Bills of Materials (SBOMs): Erstmals stellt Stackable SBOMs im CycloneDX-Format bereit, um die Transparenz und die Überprüfbarkeit der Sicherheit durch unsere Nutzer zu verbessern. Diese SBOMs liegen signiert und per in-toto attestation abgesichert in unsere OCI Registry
Erweiterungen und neue Funktionen:
- Neben den Sicherheitsverbesserungen bringt Release 24.3 auch eine Vielzahl von Erweiterungen und neuen Funktionen für die Plattform und ihre Komponenten mit sich, darunter verbesserte Datenspeicherungsoptionen, erweitertes Kommandozeilen-Tooling und benutzerdefinierte Labels für Helm-Charts.
Aktualisierungen von Produktversionen:
- Das Update unterstützt zudem neue Versionen führender Open-Source-Projekte wie Apache Airflow, Druid, Kafka, und viele andere, die alle wichtige Aktualisierungen und Verbesserungen beinhalten.
Weiterführende Informationen:
Weiterführende Details zu Release 24.3 und spezifische Upgrade-Anleitungen finden Sie in unseren Release Notes. Entdecken Sie, wie die neuesten Updates der Stackable Data Platform Ihre Fähigkeit, sicher und effizient mit Daten zu arbeiten, weiter verbessern können.
Besuchen Sie die Website von Stackable und lernen Sie auch das umfangreiche Service- und Supportangebot kennen, das Stackable Ihnen rund um die Einführung und den Betrieb seiner Open-Source-Datenplattform bietet.
