Εξέλιξη Κομματιού
Εισαγωγή στην πλατφόρμα Stratio
- Επισκόπηση της αρχιτεκτονικής Stratio και των βασικών μονάδων
- Ρόλος των Rocket και Intelligence στον κύκλο ζωής των δεδομένων
- Σύνδεση και πλοήγηση στο UI του Stratio
Εργασία με τη μονάδα Rocket
- Λήψη δεδομένων και δημιουργία σωλήνων επεξεργασίας (pipelines)
- Σύνδεση πηγών δεδομένων και ρύθμιση μετασχηματισμών
- Χρήση PySpark για εργασίες προεπεξεργασίας στο Rocket
Βασικά στοιχεία PySpark για χρήστες Stratio
- Δομές δεδομένων και πράξεις PySpark
- Δομές επανάληψης: χρήση for, while, if/else
- Γραφή ορισμένων συναρτήσεων με def και εφαρμογή τους
Προηγμένη χρήση του Rocket με PySpark
- Ροή λήψης δεδομένων (streaming) και μετασχηματισμοί
- Χρήση κύκλων και συναρτήσεων σε σενάρια batch και πραγματικού χρόνου
- Καλύτερες πρακτικές για απόδοση σε pipelines PySpark
Εξερεύνηση της μονάδας Intelligence
- Επισκόπηση των χαρακτηριστικών μοντελοποίησης και ανάλυσης δεδομένων
- Επιλογή, μετασχηματισμός και εξερεύνηση χαρακτηριστικών
- Ρόλος του PySpark στην προσαρμοσμένη ανάλυση και εξαγωγή συμπερασμάτων
Δημιουργία ροών προηγμένης ανάλυσης
- Δημιουργία συναρτήσεων ορισμένων από τον χρήστη (UDFs) στο Intelligence
- Εφαρμογή συνθηκών και κύκλων για τη λογική δεδομένων
- Περιπτώσεις χρήσης: κατακερμάτιση, συστοιχία και πρόβλεψη
Διαχείριση και Συνεργασία
- Αποθήκευση, εξαγωγή και επαναχρησιμοποίηση ροών
- Συνεργασία με άλλα μέλη της ομάδας στο Stratio
- Ανασκόπηση αποτελεσμάτων και ενσωμάτωση με εργαλεία downstream
Σύνοψη και Επόμενα Βήματα
Απαιτήσεις
- Εμπειρία με τη προγραμματιστική γλώσσα Python
- Κατανόηση εννοιών ανάλυσης δεδομένων ή επεξεργασίας big data
- Βασικές γνώσεις για Apache Spark και κατανομημένη υπολογιστική
Κοινό-Στόχος
- Μηχανικοί δεδομένων που εργάζονται σε πλατφόρμες βασισμένες στο Stratio
- Αναλυτές ή αναπτύκτες που χρησιμοποιούν τις μονάδες Rocket και Intelligence
- Τεχνικές ομάδες που μεταβαίνουν σε ροές εργασίας PySpark εντός του Stratio
Σχόλια (3)
Κατανοώντας ότι το QGIS είναι ένα εργαλείο που μπορεί να χρησιμοποιηθεί από άλλους διαφορετικούς επαγγελματίες, όπως οι γεωπόνοι.
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Κομμάτι - QGIS for Geographic Information System
Μηχανική Μετάφραση
Πώς να χρησιμοποιήσετε τα δεδομένα των ανοιχτών δορυφόρων για πραγματικές εφαρμογές
Tshering Dorji - Druk Holding and Investments
Κομμάτι - Advanced Geographic Information Systems (GIS)
Μηχανική Μετάφραση
Πρακτικά παραδείγματα μας επέτρεψαν να αισθανθούμε πραγματικά πώς λειτουργεί το πρόγραμμα. Καλές εξηγήσεις και ενσωμάτωση θεωρητικών ιδεών και του πώς σχετίζονται με τις πρακτικές εφαρμογές.
Ian - Archeoworks Inc.
Κομμάτι - ArcGIS Fundamentals
Μηχανική Μετάφραση