Εξέλιξη Κομματιού
Εισαγωγή
Κατανόηση των Big Data
Συνοπτική παρουσίαση του Spark
Συνοπτική παρουσίαση του Python
Συνοπτική παρουσίαση του PySpark
- Κατανομή δεδομένων μέσω του υποστήλματος Resilient Distributed Datasets
- Κατανομή υπολογισμών χρησιμοποιώντας τους τελεστές του Spark API
Ρύθμιση του Python με το Spark
Ρύθμιση του PySpark
Χρήση περιπτώσεων EC2 των Amazon Web Services (AWS) για το Spark
Ρύθμιση του Databricks
Ρύθμιση του συγκεντρώματος AWS EMR
Μάθηση των βασικών της προγραμματιστικής γλώσσας Python
- Έναρξη εργασίας με το Python
- Χρήση του Jupyter Notebook
- Χρήση μεταβλητών και απλών τύπων δεδομένων
- Εργασία με λίστες
- Χρήση δηλώσεων if
- Χρήση εισόδων χρηστών
- Εργασία με βρόγχους while
- Εφαρμογή συναρτήσεων
- Εργασία με κλάσεις
- Εργασία με αρχεία και εξαιρέσεις
- Εργασία με έργα, δεδομένα και API
Μάθηση των βασικών των Spark DataFrame
- Έναρξη εργασίας με τα Spark DataFrames
- Εφαρμογή βασικών εργασιών με το Spark
- Χρήση εργασιών Groupby και Aggregation
- Εργασία με ορόσημα (Timestamps) και ημερομηνίες
Εργασία σε άσκηση έργου Spark DataFrame
Κατανόηση της Μηχανικής Μάθηση με το MLlib
Εργασία με MLlib, Spark και Python για Μηχανική Μάθηση
Κατανόηση των Παρεμβολών (Regressions)
- Μάθηση της θεωρίας της Γραμμικής Παρεμβολής
- Εφαρμογή κώδικα αξιολόγησης παρεμβολής
- Εργασία σε δοκιμαστική άσκηση γραμμικής παρεμβολής
- Μάθηση της θεωρίας της Λογιστικής Παρεμβολής
- Εφαρμογή κώδικα λογιστικής παρεμβολής
- Εργασία σε δοκιμαστική άσκηση λογιστικής παρεμβολής
Κατανόηση των Τυχαίων Δακοτών και των Δέντρων Απόφασης
- Μάθηση της θεωρίας των μεθόδων δέντρων
- Εφαρμογή κώδικα Δέντρων Απόφασης και Τυχαίων Δακοτών
- Εργασία σε δοκιμαστική άσκηση ταξινόμησης τυχαίων δακοτών
Εργασία με Συστομάτωση K-means
- Κατανόηση της θεωρίας της συστομάτωσης K-means
- Εφαρμογή κώδικα συστομάτωσης K-means
- Εργασία σε δοκιμαστική άσκηση συστομάτωσης
Εργασία με Συστήματα Πρότασης
Εφαρμογή Επεξεργασίας Φυσικής Γλώσσας
- Κατανόηση της Επεξεργασίας Φυσικής Γλώσσας (NLP)
- Συνοπτική παρουσίαση εργαλείων NLP
- Εργασία σε δοκιμαστική άσκηση NLP
Ροή δεδομένων (Streaming) με το Spark στο Python
- Συνοπτική παρουσίαση του Streaming με το Spark
- Δοκιμαστική άσκηση Spark Streaming
Απαιτήσεις
- Γενικές δεξιότητες προγραμματισμού
Στόχος κοινό
- Αναπτύκτες
- Επαγγελματίες Πληροφορικής
- Επιστήμονες Δεδομένων
Σχόλια (6)
Μου άρεσε το γεγονός ότι ήταν πρακτικό. Ελάφρυνε την εφαρμογή των θεωρητικών γνώσεων με πρακτικά παραδείγματα.
Aurelia-Adriana - Allianz Services Romania
Κομμάτι - Python and Spark for Big Data (PySpark)
Μηχανική Μετάφραση
Ο κOURSE αφορούσε μια σειρά πολύ περίπλοκων συναφών θεμάτων και ο Παblo διαθέτει βαθιά εξοικείωση με κάθε ένα από τα. Κάποιες φορές, λεπτομέρειες χάνονταν στην επικοινωνία και/ή λόγω πίεσης χρόνου και ίσως οι προσδοκίες δεν γνωρίζουν ακριβώς να πληρούνται λόγω αυτού. Επίσης, υπήρξαν κάποια προβλήματα στη διαμόρφωση του UHG/Azure Databricks, αλλά ο Παblo και η UHG τα επέλυσαν γρήγορα μόλις έγιναν φανερά - αυτό σε μου δείχνει υψηλό επίπεδο κατανόησης και επαγγελματικότητας μεταξύ της UHG και του Παblo,
Michael Monks - Tech NorthWest Skillnet
Κομμάτι - Python and Spark for Big Data (PySpark)
Μηχανική Μετάφραση
Ιδιαίτερη προσοχή.
ARCHANA ANILKUMAR - PPL
Κομμάτι - Python and Spark for Big Data (PySpark)
Μηχανική Μετάφραση
Εκπαίδευση με εφαρμογές..
Abraham Thomas - PPL
Κομμάτι - Python and Spark for Big Data (PySpark)
Μηχανική Μετάφραση
Τα μαθήματα διδάχθηκαν σε ένα Jupyter notebook. Τα θέματα υπήρξαν δομημένα με λογική ακολουθία και βοήθησαν φυσικά στην ανάπτυξη της σεσιόν από τα πιο εύκολα μέρη στα πιο περίπλοκα. Είμαι ήδη προχωρημένος χρήστης Python και έχω φόντο σε Machine Learning, οπότε βρήκα το μάθημα ευκολότερο να ακολουθήσω από ό,τι πιθανώς κάποιοι από τους συμμαθητές μου που ολοκλήρωσαν το εκπαιδευτικό μαθήμα. Εκτιμώ ότι κάποια από τις πιο βασικές έννοιες οmissed και ότι εστίασε στις πιο ουσιώδεις θέματα.
Angela DeLaMora - ADT, LLC
Κομμάτι - Python and Spark for Big Data (PySpark)
Μηχανική Μετάφραση
πρακτικές εργασίες
Pawel Kozikowski - GE Medical Systems Polska Sp. Zoo
Κομμάτι - Python and Spark for Big Data (PySpark)
Μηχανική Μετάφραση
