STACKIT Intake ermöglicht die hochvolumige Echtzeit-Datenaufnahme für STACKIT-Datendienste. Der Dienst basiert auf Apache Kafka und bietet native Integration mit STACKIT Object Storage und dem Iceberg-Tabellenformat für moderne Data-Lakehouse-Architekturen.
Funktionen
- Apache Kafka Basis: Bewährtes, hochdurchsatzfähiges Event-Streaming
- Iceberg-Integration: Native Unterstützung des Apache Iceberg Tabellenformats
- Object Storage Anbindung: Direktes Schreiben in STACKIT Object Storage
- Schema Registry: Verwaltung von Datenformaten und -versionen
- Vollständig verwaltet: Kein Kafka-Cluster-Betrieb notwendig
Typische Anwendungsfälle
Data Lakehouse Ingestion: Intake übernimmt die Rolle der Datenaufnahme-Schicht in einer modernen Data-Lakehouse-Architektur: Daten fließen über Kafka in Iceberg-Tabellen auf Object Storage.
IoT und Telemetrie: Gerätedaten, Sensormesswerte und Anwendungslogs werden hochvolumig und in Echtzeit erfasst und für nachgelagerte Analysen bereitgestellt.
Vorteile
- DSGVO-konform: Alle Datenströme in deutschen Rechenzentren
- Open Standards: Apache Kafka und Apache Iceberg als Industriestandards
- Nahtlose Integration: Direkte Anbindung an Dremio, Workflows und Object Storage
- Skalierbar: Verarbeitung von Millionen Events pro Sekunde
Integration mit innFactory
Als offizieller STACKIT Partner unterstützt innFactory Sie beim Design von Echtzeit-Datenpipelines: von der Kafka-Konfiguration über Iceberg-Schema-Design bis zur Integration mit nachgelagerten Analysediensten.
