STACKIT Workflows ermöglicht die Orchestrierung komplexer Datenpipelines und ML-Workflows. Kompatibel mit Apache Airflow DAGs und integriert in das STACKIT Data-Plattform-Ökosystem (Dremio, Intake, AI Model Serving).
Funktionen
- Apache Airflow kompatibel: Bestehende DAGs können ohne Änderungen übernommen werden
- Visueller DAG-Editor: Erstellen und Verwalten von Workflows über die STACKIT-Oberfläche
- Trigger-Typen: Zeitbasiert, ereignisbasiert und manuell
- Integrierte Verbindungen: Vorkonfigurierte Konnektoren für STACKIT-Dienste
- Vollständig verwaltet: Kein Airflow-Infrastrukturbetrieb notwendig
Typische Anwendungsfälle
Datenpipeline-Orchestrierung: Teams koordinieren mehrstufige ETL-Prozesse: Datenaufnahme über Intake, Transformation in Dremio und Bereitstellung für BI-Tools.
ML-Automatisierung: ML-Pipelines werden als DAGs definiert: Datenvorbereitung, Modelltraining mit AI Model Experiments-Tracking und Deployment über AI Model Serving.
Vorteile
- DSGVO-konform: Alle Workflow-Ausführungen in deutschen Rechenzentren
- Kein Lock-in: Apache Airflow ist ein Industriestandard
- Vollständiger Datenplattform-Stack: In Kombination mit Dremio, Intake und AI-Diensten
- Reproduzierbar: Versionierte DAGs und Ausführungshistorie
Integration mit innFactory
Als offizieller STACKIT Partner unterstützt innFactory Sie beim Design und der Implementierung von Datenpipelines: von DAG-Architektur über Fehlerbehandlung bis zur Integration mit dem gesamten STACKIT Data-Ökosystem.
