Thank you for sending your enquiry! One of our team members will contact you shortly.
Thank you for sending your booking! One of our team members will contact you shortly.
Course Outline
Εισαγωγή:
- Το Apache Spark στο Hadoop Ecosystem Σύντομη εισαγωγή για python, scala
Βασικά στοιχεία (θεωρία):
- Αρχιτεκτονική RDD Transformation and Actions Stage, Task, Dependencies
Χρησιμοποιώντας το περιβάλλον Databricks κατανοήστε τα βασικά (πρακτικό εργαστήριο):
- Ασκήσεις με χρήση RDD API Βασικές συναρτήσεις ενεργειών και μετασχηματισμού PairRDD Συμμετοχή σε στρατηγικές αποθήκευσης στην κρυφή μνήμη Ασκήσεις με χρήση DataFrame API SparkSQL DataFrame: επιλογή, φίλτρο, ομάδα, ταξινόμηση UDF (συνάρτηση καθορισμένη από το χρήστη) Εξέταση ροής API DataSet
Χρησιμοποιώντας το περιβάλλον AWS κατανοήστε την ανάπτυξη (πρακτικό εργαστήριο):
- Βασικά στοιχεία του AWS Glue Κατανόηση των διαφορών μεταξύ AWS EMR και AWS Glue Παράδειγμα εργασιών και στα δύο περιβάλλοντα Κατανόηση πλεονεκτημάτων και μειονεκτημάτων
Επιπλέον:
- Εισαγωγή στην ενορχήστρωση Apache Airflow
Requirements
Ικανότητες προγραμματισμού (κατά προτίμηση python, scala)
SQL βασικά
21 Hours
Testimonials (3)
Having hands on session / assignments
Poornima Chenthamarakshan - Intelligent Medical Objects
Course - Apache Spark in the Cloud
1. Right balance between high level concepts and technical details. 2. Andras is very knowledgeable about his teaching. 3. Exercise
Steven Wu - Intelligent Medical Objects
Course - Apache Spark in the Cloud
Get to learn spark streaming , databricks and aws redshift