Schulungsübersicht
Einführung in Apache Spark
- Die Rolle von Spark bei der Verarbeitung grosser Datenmengen
- Spark-Architektur und ihre Komponenten
Einrichten von Apache Spark
- Hardware- und Softwarevoraussetzungen
- Installationsverfahren für den Standalone- und Clustermodus
- Konfigurations-Best Practices für Systemadministratoren
Verwaltung von Spark-Clustern
- Cluster-Management-Tools und -Techniken
- Überwachung von Spark-Anwendungen und Cluster-Ressourcen
- Sicherheitskonfigurationen und Benutzerverwaltung
Leistungsoptimierung und Feinabstimmung
- Ressourcenzuteilung und -planung
- Optimierung von Spark für optimale Leistung
- Identifizieren und Beheben gängiger Engpässe
Fehlerbehebung und Problemlösung
- Häufige Herausforderungen in der Spark-Administration
- Diagnosetools und -techniken für die Fehlerbehebung
- Schritt-für-Schritt-Ansatz zur Lösung gängiger Probleme
- Best Practices für die Aufrechterhaltung einer gesunden Spark-Umgebung
Fortgeschrittene Administrationsthemen
- Integration mit anderen Big-Data-Tools
- Sicherstellung von hoher Verfügbarkeit und Disaster Recovery
- Aktualisierung und Skalierung von Spark-Clustern
Zusammenfassung und nächste Schritte
Voraussetzungen
- Grundkenntnisse in Netzwerkkonfiguration und -verwaltung
- Vertrautheit mit dem Linux-Betriebssystem und der Befehlszeilenschnittstelle
- Interesse am Erlernen verteilter Computersysteme und des Datenmanagements
Zielgruppe
- Systemadministratoren
Erfahrungsberichte (3)
Eine Reise durch die Spark-Welt: ein sehr intensiver Kurs. DSL, Spark SQL, Partitionierung versus Bucketing für mich.
Georgiana Elisabeta
Kurs - Apache Spark Fundamentals
Maschinelle Übersetzung
Ich mochte es, dass es praktisch war. Ich liebte es, die theoretischen Kenntnisse mit praktischen Beispielen anzuwenden.
Aurelia-Adriana - Allianz Services Romania
Kurs - Python and Spark for Big Data (PySpark)
Maschinelle Übersetzung
Die Tatsache, dass wir die meisten Informationen, Kurse, Präsentationen und Übungen mitnehmen konnten, sodass wir sie noch einmal durchgehen und eventuell das Wiederholen können, was wir beim ersten Mal nicht verstanden haben, oder das Verbessern, was wir bereits gemacht haben.
Raul Mihail Rat - Accenture Industrial SS
Kurs - Python, Spark, and Hadoop for Big Data
Maschinelle Übersetzung