Ευχαριστούμε που στάλθηκε η αποσαφήνισή σας! Ένα μέλος της ομάδου μας θα επικοινωνήσει μαζί σας σύντομα.
Ευχαριστούμε για την εκδήλωση κράτησης! Ένας από τους συνεργάτες μας θα επικοινωνήσει μαζί σας σύντομα.
Εξέλιξη Κομματιού
Επισκόπηση Βασικών Στοιχείων του Apache Airflow
- Βασικές έννοιες: DAGs, εργασίες και τελεστές
- Αρχιτεκτονική και συστατικά μέρη του Airflow
- Ανασκόπηση συνηθισμένων περιπτώσεων χρήσης και ροών εργασίας
Βελτιστοποίηση Απόδοσης Ροών Εργασίας
- Εντοπισμός σημείων συμφόρησης στους αγωγούς Airflow
- Τεχνικές βελτιστοποίησης σε επίπεδο εργασίας
- Αξιοποίηση επαναλήψεων εργασιών, παραλληλισμού και ταυτοχρονισμού
Διαχείριση Πολύπλοκων Εξαρτήσεων
- Ορισμός δυναμικών εξαρτήσεων σε ροές εργασίας
- Χειρισμός ροών εργασίας με συνθήκες και διακλαδώσεις
- Αποτελεσματική χρήση ομάδων εργασιών και υπο-DAGs
Προηγμένες Λειτουργίες στο Apache Airflow
- Δημιουργία προσαρμοσμένων τελεστών και hooks
- Υλοποίηση αισθητήρων για εξωτερικούς ενεργοποιητές
- Ενσωμάτωση υπηρεσιών τρίτων και προσθέτων
Κλιμάκωση Αναπτύξεων του Apache Airflow
- Προσεγγίσεις οριζόντιας και κάθετης κλιμάκωσης
- Χρήση Celery Executors για κατανεμημένη εκτέλεση
- Βέλτιστες πρακτικές κλιμάκωσης σε περιβάλλοντα cloud
Παρακολούθηση και Εντοπισμός Σφαλμάτων στις Ροές Εργασίας
- Διαμόρφωση καταγραφής και ειδοποιήσεων για παρακολούθηση ροών εργασίας
- Χρήση του Airflow UI και CLI για αντιμετώπιση προβλημάτων
- Εντοπισμός και επίλυση συνηθισμένων ζητημάτων σε αναπτύξεις Airflow
Ασφάλεια του Apache Airflow
- Αυθεντικοποίηση και έλεγχος πρόσβασης στο Airflow
- Προστασία ευαίσθητων δεδομένων και διαμορφώσεων περιβάλλοντος
- Εφαρμογή ιχνών ελέγχου για ροές εργασίας
Επιχειρηματικά Σενάρια και Βέλτιστες Πρακτικές
- Σχεδιασμός ανθεκτικών ροών εργασίας για περιβάλλοντα παραγωγής
- Αξιοποίηση του Airflow για μηχανική δεδομένων και αγωγούς ETL
- Εξερεύνηση πραγματικών περιπτώσεων μελέτης κλιμακούμενων αναπτύξεων Airflow
Σύνοψη και Επόμενα Βήματα
Απαιτήσεις
- Βασικές γνώσεις Apache Airflow
- Εξοικείωση με προγραμματισμό Python και έννοιες ενορχήστρωσης ροών εργασίας
- Εμπειρία στη διαχείριση και ανάπτυξη εφαρμογών σε περιβάλλοντα Linux
Κοινό-στόχος
- Μηχανικοί δεδομένων
- Επαγγελματίες DevOps
- Προγραμματιστές λογισμικού
21 Ώρες
Σχόλια (1)
Ο εκπαιδευτής προσαρμόστηκε στο επίπεδο των συμμετέχontων και απάντησε σε όλα τα ερωτήματα. Ήταν πολύ επικοινωνιακός και ήταν εύκολο να του αλληλεπιδράσεις. Εκτιμήθηκα πολύ το διατυπωμένο της εκπαίδευσης, το οποίο περιελάμβανε πολλές πρακτικές εξασκήσεις. Γενικά, ήταν μια πολύ συμμετοχική και καλά διοργανωμένη συνεδρία.
Jacek Chlopik - ZAKLAD UBEZPIECZEN SPOLECZNYCH
Κομμάτι - Apache Airflow: Building and Managing Data Pipelines
Μηχανική Μετάφραση