Distributed Messaging with Apache Kafka Training Course

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε προγραμματιστές που επιθυμούν να ενσωματώσουν το Apache Kafka με υπάρχουσες βάσεις δεδομένων και εφαρμογές για επεξεργασία, ανάλυση κ.λπ.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Να χρησιμοποιήσουν το Kafka Connect για να εισάγουν μεγάλες ποσότητες δεδομένων από ένα βάση δεδομένων σε topics του Kafka.
• Να εισάγουν δεδομένα λογαριασμών που παράγονται από server εφαρμογών σε topics του Kafka.
• Make οποιαδήποτε συλλεγμένα δεδομένα προς χρήση για επεξεργασία ροών.
• Να εξαγάγουν δεδομένα από topics του Kafka σε δευτερογενείς συστήματα για αποθήκευση και ανάλυση.

αυτό εκπαιδευτής-LED, Live Training (επιτόπου ή εξ αποστάσεως) απευθύνεται σε μηχανικούς που επιθυμούν να αξιοποιήσουν (μια διανομή του Κάφκα) για την κατασκευή και τη διαχείριση ενός σε πραγματικό χρόνο πλατφόρμα επεξεργασίας δεδομένων για τις εφαρμογές τους.

μέχρι το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση να:

• Εγκαταστήσετε και ρυθμίσετε το Confluent Platform.
• Χρησιμοποιήστε τους διαχειριστές εργαλεία και υπηρεσίες του Confluent για να λειτουργήσετε πιο εύκολα το Kafka.
• Αποθηκεύστε και επεξεργάστε εισερχόμενα συνεχή δεδομένα.
• Οργανώστε και διαχειρίστε τους κλάστερς Kafka.
• Ασφαλίστε τις ροές δεδομένων.

μορφή του μαθήματος

• Επικοινωνητικός διάλογος και συζήτηση.
• Πολλές ασκήσεις και πρακτική εμπειρία.
• Εφαρμογή με χειρόνομα σε ένα περιβάλλον live-lab.

επιλογές προσαρμογής μαθημάτων

• Αυτό το μάθημα βασίζεται στην ανοιχτή πηγή έκδοση του Confluent: Confluent Open Source.
• Για να ζητήσετε μια προσαρμοσμένη εκπαίδευση για αυτό το μάθημα, παρακαλώ επικοινωνήστε μαζί μας για να σχεδιάσουμε.

Apache Kafka είναι μια κατανεμημένη πλατφόρμα ροής. Πρόκειται για de facto πρότυπο για την κατασκευή αγωγών δεδομένων και επιλύει πολλές διαφορετικές περιπτώσεις χρήσης γύρω από την επεξεργασία δεδομένων: μπορεί να χρησιμοποιηθεί ως ουρά μηνυμάτων, κατανεμημένο αρχείο καταγραφής, επεξεργαστής ροής κλπ.

Θα ξεκινήσουμε με κάποια θεωρία πίσω από τους αγωγούς δεδομένων γενικά, και στη συνέχεια θα συνεχίσουμε με βασικές έννοιες πίσω από τον Kafka. Θα ανακαλύψουμε επίσης σημαντικά στοιχεία όπως το Kafka Streams και το Kafka Connect.

Σε αυτήν την υπό εκπαιδευτή, ζωντανή εκπαίδευση στο Ελλάδα (επιτόπου ή εξ αποστάσεως), οι συμμετέχοντες θα μάθουν πώς να στήνουν και να ενσωματώνουν διαφορετικά Stream Processing πλαίσια με υπάρχοντα συστήματα αποθήκευσης μεγάλων δεδομένων και σχετικές εφαρμογές λογισμικού και μικροϋπηρεσίες.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Εγκαταστήστε και διαμορφώστε διαφορετικά πλαίσια Stream Processing, όπως το Spark Streaming και το Kafka Streaming.
• Κατανοήστε και επιλέξτε το πιο κατάλληλο πλαίσιο για τη δουλειά.
• Επεξεργασία δεδομένων συνεχώς, ταυτόχρονα και με τρόπο καταγραφής.
• Ενσωματώστε λύσεις Stream Processing με υπάρχουσες βάσεις δεδομένων, αποθήκες δεδομένων, λίμνες δεδομένων κ.λπ.
• Ενσωματώστε την πιο κατάλληλη βιβλιοθήκη επεξεργασίας ροής με εταιρικές εφαρμογές και μικροϋπηρεσίες.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακά ή επιτόπου) απευθύνεται σε sysadmin που επιθυμούν να δημιουργήσουν, να αναπτύξουν, να διαχειριστούν και να βελτιστοποιήσουν ένα εταιρικό σύμπλεγμα Kafka.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Δημιουργήστε και διαχειριστείτε ένα σύμπλεγμα Kafka.
• Αξιολογήστε τα οφέλη και τα μειονεκτήματα της ανάπτυξης του Kafka on-premise έναντι του cloud.
• Αναπτύξτε και παρακολουθήστε το Kafka χρησιμοποιώντας διάφορα εργαλεία εσωτερικής εγκατάστασης και περιβάλλοντος cloud.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε προγραμματιστές μεσαίου επιπέδου που επιθυμούν να αναπτύξουν εφαρμογές μεγάλων δεδομένων με Apache Kafka.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

Αναπτύξτε παραγωγούς και καταναλωτές Kafka για να στέλνουν και να διαβάζουν δεδομένα από τον Kafka. Ενσωματώστε το Kafka με εξωτερικά συστήματα χρησιμοποιώντας το Kafka Connect. Γράψτε εφαρμογές ροής με τα Kafka Streams & ksqlDB. Ενσωματώστε μια εφαρμογή πελάτη Kafka με το Confluent Cloud για αναπτύξεις Kafka που βασίζονται σε σύννεφο. Αποκτήστε πρακτική εμπειρία μέσω πρακτικών ασκήσεων και πραγματικών περιπτώσεων χρήσης.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε μηχανικούς δεδομένων, επιστήμονες δεδομένων και προγραμματιστές που επιθυμούν να χρησιμοποιήσουν τις δυνατότητες Apache Kafka στη ροή δεδομένων με το Python.

Μέχρι το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα μπορούν να χρησιμοποιούν το Apache Kafka για να παρακολουθούν και να διαχειρίζονται τις συνθήκες σε συνεχείς ροές δεδομένων χρησιμοποιώντας προγραμματισμό Python.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε προγραμματιστές μεσαίου επιπέδου Java που επιθυμούν να ενσωματώσουν το Apache Kafka στις εφαρμογές τους για αξιόπιστη, επεκτάσιμη και υψηλή απόδοση μηνυμάτων.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Κατανοήστε την αρχιτεκτονική και τα βασικά στοιχεία του Κάφκα.
• Ρυθμίστε και διαμορφώστε ένα σύμπλεγμα Kafka.
• Δημιουργήστε και καταναλώστε μηνύματα χρησιμοποιώντας το Java.
• Εφαρμόστε το Kafka Streams για επεξεργασία δεδομένων σε πραγματικό χρόνο.
• Εξασφαλίστε την ανοχή σφαλμάτων και την επεκτασιμότητα στις εφαρμογές Kafka.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακή ή επιτόπου) απευθύνεται σε διαχειριστές συστήματος μεσαίου επιπέδου που επιθυμούν να αξιοποιήσουν αποτελεσματικά τις δυνατότητες ουράς μηνυμάτων του Κάφκα.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Κατανοήστε τις δυνατότητες και την αρχιτεκτονική της ουράς μηνυμάτων του Κάφκα.
• Διαμόρφωση θεμάτων Kafka για σενάρια ουράς μηνυμάτων.
• Δημιουργήστε και καταναλώστε μηνύματα χρησιμοποιώντας τον Κάφκα.
• Παρακολούθηση και διαχείριση του Κάφκα ως ουρά μηνυμάτων.

Αυτή η εκπαίδευση με οδηγό σε χώρο (διαπολιτειακά ή προσωπικά) στο Ελλάδα είναι προσανατολισμένη σε δοκιμαστές λογισμικού που θέλουν να εφαρμόσουν μέτρα ασφάλειας δικτύου σε μια εφαρμογή Apache Kafka.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Να εγκαταστήσουν τη Apache Kafka σε έναν διαδικτυακό server.
• Να εφαρμόσουν κρυπτογράφηση SSL για να αποτρέψουν προσπάθειες επίθεσης.
• Να προσθέσουν αυθεντικοποίηση ACL για να ακολουθούν και να ελέγχουν τον πρόσβαση χρηστών.
• Να εξασφαλίσουν ότι οι πιστοποιημένοι πελάτες έχουν πρόσβαση σε Kafka clusters με SSL και SASL αυθεντικοποίηση.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε προγραμματιστές μεσαίου επιπέδου που επιθυμούν να μάθουν τις βασικές αρχές του Kafka και να το ενσωματώσουν με το Spring Boot.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Κατανοήστε τον Κάφκα και την αρχιτεκτονική του.
• Μάθετε πώς να εγκαταστήσετε, να ρυθμίσετε και να ρυθμίσετε ένα βασικό περιβάλλον Kafka.
• Ενσωματώστε τον Κάφκα με το Spring Boot.

Το Kafka Streams είναι μια βιβλιοθήκη πελάτη για την κατασκευή εφαρμογών και μικροεπιχειρήσεων, τα δεδομένα των οποίων μεταφέρονται προς και από ένα σύστημα ανταλλαγής μηνυμάτων Kafka. Παραδοσιακά, ο Apache Kafka έχει βασιστεί στο Apache Spark ή στη Apache Storm για να επεξεργάζεται δεδομένα μεταξύ παραγωγών μηνυμάτων και καταναλωτών. Καλώντας το API Streams Kafka από μια εφαρμογή, τα δεδομένα μπορούν να επεξεργαστούν απευθείας μέσα στο Kafka, παρακάμπτοντας την ανάγκη για την αποστολή των δεδομένων σε ένα ξεχωριστό σύμπλεγμα για επεξεργασία.

Σε αυτήν την καθοδηγούμενη από εκπαιδευτή, ζωντανή προπόνηση, οι συμμετέχοντες θα μάθουν πώς να ενσωματώσουν τις ροές του Kafka σε ένα σύνολο από Java εφαρμογές που μεταφέρουν δεδομένα από και προς τον Apache Kafka για επεξεργασία ρεύματος.

Μέχρι τη λήξη αυτής της εκπαίδευσης, οι συμμετέχοντες θα μπορούν:

• Να καταλάβουν τις χαρισματικότητες και τις πλεονεξίες των Kafka Streams σε σχέση με άλλα πλαίσια επεξεργασίας ρευμάτων
• Να επεξεργάζονται δεδομένα ρεύματος άμεσα μέσα σε ένα κλάστερ Kafka
• Να γράφουν μια εφαρμογή Java ή Scala ή μικρό υπηρεσία που συνδέεται με το Kafka και το Kafka Streams
• Να γράφουν σύντομο κώδικα που μετατρέπει εισερχόμενα θέματα Kafka σε έξοδα θέματα Kafka
• Να δημιουργήσουν, πακέτωσαν και εγκατέστησαν την εφαρμογή

Κοινό

• Προγραμματιστές

Μορφή της εκπαίδευσης

• Διάλεξη, συζήτηση, ασκήσεις και έμφανη πρακτική

Σημειώσεις

• Για να απαιτήσετε μια προσανατολισμένη εκπαίδευση για αυτό το κουρσέ, παρακαλώ επικοινωνήστε μαζί μας για να συμφωνήσετε

Αυτή η ζωντανή εκπαίδευση στο Ελλάδα (διαδικτυακό ή επιτόπου) από εκπαιδευτές απευθύνεται σε διαχειριστές συστημάτων αρχαρίου έως μεσαίου επιπέδου που επιθυμούν να μάθουν πώς να διαχειρίζονται αποτελεσματικά θέματα Kafka για αποτελεσματική ροή και επεξεργασία δεδομένων.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Κατανοήστε τις θεμελιώδεις αρχές και την αρχιτεκτονική του θέματος του Κάφκα.
• Δημιουργήστε, διαμορφώστε και διαχειριστείτε θέματα Kafka.
• Παρακολουθήστε θέματα Kafka για υγεία, απόδοση και διαθεσιμότητα.
• Εφαρμογή μέτρων ασφαλείας για θέματα Κάφκα.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε προγραμματιστές που επιθυμούν να εφαρμόσουν Apache Kafka επεξεργασία ροής χωρίς να γράφουν κώδικα.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Εγκαταστήστε και διαμορφώστε το Confluent KSQL.
• Ρυθμίστε έναν αγωγό επεξεργασίας ροής χρησιμοποιώντας μόνο εντολές SQL (όχι κωδικοποίηση Java ή Python).
• Πραγματοποιήστε το φιλτράρισμα δεδομένων, τους μετασχηματισμούς, τις συναθροίσεις, τις συνδέσεις, τα παράθυρα και τη συνεδρία εξ ολοκλήρου στο SQL.
• Σχεδιάστε και αναπτύξτε διαδραστικά, συνεχή ερωτήματα για ροή ETL και αναλυτικά στοιχεία σε πραγματικό χρόνο.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων που επιθυμούν να χρησιμοποιήσουν τη στοίβα SMACK για να δημιουργήσουν πλατφόρμες επεξεργασίας δεδομένων για λύσεις μεγάλων δεδομένων.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Εφαρμόστε μια αρχιτεκτονική αγωγών δεδομένων για την επεξεργασία μεγάλων δεδομένων.
• Αναπτύξτε μια υποδομή συμπλέγματος με το Apache Mesos και το Docker.
• Αναλύστε δεδομένα με Spark και Scala.
• Διαχειριστείτε μη δομημένα δεδομένα με το Apache Cassandra.