Datadog zertifiziert MinIO AIStor für On-Premises-BYOC-Observability

Datadog hat MinIO AIStor als On-Premises-Grundlage für Datadog Bring Your Own Cloud zertifiziert. Unternehmen können Telemetriedaten damit auf kontrollierter Infrastruktur speichern und Datadog für die Suche und Untersuchung von Logs nutzen. Die Integration unterstützt derzeit Logs, Unterstützung für Traces und Metriken soll bald folgen.
- Datadog hat MinIO AIStor als On-Premises-Grundlage für Datadog BYOC zertifiziert.
- Datadog BYOC for Logs führt Indexierung und Suche im Kubernetes-Cluster des Kunden aus.
- AIStor speichert durchsuchbare Logdaten auf einer vom Kunden kontrollierten Infrastruktur.
- Suchen nutzen eine TLS-verschlüsselte ausgehende Verbindung, die mit einem Datadog-API-Schlüssel authentifiziert wird.
- Unterstützung für Traces und Metriken soll bald folgen.
On-Premises-Speicher für Datadog BYOC
Datadog zufolge richtet sich die Integration an Unternehmen, deren Datenrichtlinien den Speicherort von Observability-Daten einschränken. Dazu zählen Banken, Krankenhausnetzwerke und andere Organisationen mit strengen Vorgaben. MinIO AIStor stellt den On-Premises-Objektspeicher bereit, während Datadog Überwachungs- und Untersuchungsfunktionen für die Daten liefert.
Mit dieser Konfiguration können Teams On-Premises-Logs in Datadog durchsuchen, sie in Dashboards und Monitoren verwenden und über Bits AI und den Datadog MCP Server darauf zugreifen. Datadog BYOC for Logs führt Indexierung und Suche im Kubernetes-Cluster des Kunden aus. Die Systeme kommunizieren über die S3-kompatible API von AIStor und verbinden die Datadog-BYOC-Abfrage-Engine mit den in der Kundenumgebung gespeicherten Daten.
So verarbeitet die Architektur Logdaten
Datadog BYOC besteht aus Datadog Observability Pipelines, die die Erfassungsschicht bereitstellen, und der BYOC-Engine. Observability-Pipelines-Worker sammeln und verarbeiten Logs aus Anwendungen und der Infrastruktur innerhalb der Kundenumgebung, bevor sie diese an die Datadog-BYOC-Indexer weitergeben.
Die Indexer strukturieren Logs in durchsuchbare Dateien und schreiben sie in einen AIStor-Bucket. Eine Hintergrundkomprimierung führt kleinere Dateien zusammen, während ein PostgreSQL-Metastore die Indexmetadaten erfasst, die zum Auffinden der Dateien erforderlich sind. Datadog zufolge ermöglicht diese Trennung, den Speicher unabhängig von der für Indexierung und Suchen eingesetzten Rechenkapazität zu erweitern.
Unternehmen können die Indexierungskapazität erhöhen, wenn das Datenaufkommen steigt, die Suchkapazität erweitern, wenn Ingenieure und Bits AI mehr Untersuchungen durchführen, und die AIStor-Kapazität ausbauen, wenn die vorgehaltene Historie wächst. Die Erasure-Coding-Technik von AIStor sorgt für Redundanz, ohne mehrere vollständige Kopien jedes Objekts zu benötigen. Transparentes Object Tiering kann laut Datadog zudem dabei helfen, Leistung und Speicherkosten auszubalancieren.
Zugriffskontrollen und Datenschutz
Suchvorgänge werden innerhalb der Infrastruktur des Kunden ausgeführt, wobei relevante Daten aus AIStor abgerufen werden. Datadog zufolge erhalten Suchsysteme Abfragen über eine TLS-verschlüsselte ausgehende Verbindung, die mit dem Datadog-API-Schlüssel des Kunden initiiert und authentifiziert wird. Dadurch kann die Bereitstellung Suchvorgänge ermöglichen, ohne eingehende Ports zu öffnen oder einen öffentlichen Endpunkt bereitzustellen.
Bei Suchen im Log Explorer werden die Ergebnisse über die Datadog-Dienste an den Browser des Nutzers weitergeleitet und dort dargestellt. Sie werden jedoch nicht bei Datadog gespeichert oder zwischengespeichert. Der indexierte Logdatensatz bleibt während der gesamten Aufbewahrungsdauer in MinIO AIStor. Datadog bietet außerdem rollenbasierte Zugriffskontrollen, Einschränkungen für den Supportzugriff sowie Einstellungen, mit denen sich Logbeispiele deaktivieren oder Logfelder aus Benachrichtigungsvorlagen ausschließen lassen.
Das Angebot unterstützt derzeit Logs. Datadog zufolge sollen Unterstützung für Traces und Metriken bald folgen. Damit können Unternehmen auf eine stärker vernetzte Sicht ihrer Systeme hinarbeiten und zugleich mehr der zugrunde liegenden Telemetriedaten unter ihrer Kontrolle behalten.

