Schulungsübersicht
Einführung in Apache Airflow für Machine Learning
- Überblick über Apache Airflow und dessen Relevanz für die Data Science
- Schlüsselmerkmale zur Automatisierung von Machine-Learning-Workflows
- Einrichten von Airflow für Data-Science-Projekte
Aufbau von Machine-Learning-Pipelines mit Airflow
- Entwurf von DAGs (Directed Acyclic Graphs) für End-to-End-ML-Workflows
- Verwendung von Operatoren zur Datenerfassung, Vorverarbeitung und Feature Engineering
- Zeitplanung und Verwaltung von Pipeline-Abhängigkeiten
Modelltraining und Validierung
- Automatisierung der Modelltrainingaufgaben mit Airflow
- Integration von Airflow in ML-Frameworks (z.B. TensorFlow, PyTorch)
- Validierung von Modellen und Speicherung der Evaluationsmetriken
Modellbereitstellung und Überwachung
- Bereitstellung von Machine-Learning-Modellen über automatisierte Pipelines
- Überwachung bereitgestellter Modelle mit Airflow-Aufgaben
- Umgang mit Retrainings und Modellaktualisierungen
Fortgeschrittene Anpassung und Integration
- Entwicklung von benutzerdefinierten Operatoren für ML-spezifische Aufgaben
- Integration von Airflow in Cloud-Plattformen und ML-Dienste
- Erweiterung von Airflow-Workflows mit Plugins und Sensoren
Optimierung und Skalierung von ML-Pipelines
- Verbesserung der Workflow-Leistung für grosse Datenmengen
- Skalierung von Airflow-Deployments mit Celery und Kubernetes
- Best Practices für produktionsreife ML-Workflows
Fallstudien und praktische Anwendungen
- Praxisnahe Beispiele zur Automatisierung von ML mit Airflow
- Praktische Übung: Aufbau einer End-to-End-ML-Pipeline
- Diskussion von Herausforderungen und Lösungen im Management von ML-Workflows
Zusammenfassung und weitere Schritte
Voraussetzungen
- Vertrautheit mit Machine-Learning-Workflows und Konzepten
- Grundlegendes Verständnis von Apache Airflow, einschließlich DAGs und Operatoren
- Kenntnisse in der Python-Programmierung
Zielgruppe
- Data Scientists
- Machine-Learning-Ingenieure
- KI-Entwickler
Erfahrungsberichte (2)
Erfahrungsaufbau im Bereich der Prompt-Wiederholung für Personen, die zuvor keine KI genutzt haben, sowie die Einführung alternativer Methoden der KI-Nutzung für bestehende Anwender.
Matthew Gay - Tarsus Pharmaceuticals
Kurs - Artificial Intelligence (AI) Overview
Maschinelle Übersetzung
Nach grundlegenden Prinzipien arbeiten und sich innerhalb desselben Tages auf die Anwendung von Fallstudien konzentrieren
Maggie Webb - Department of Jobs, Regions, and Precincts
Kurs - Artificial Neural Networks, Machine Learning, Deep Thinking
Maschinelle Übersetzung