HBase for Developers Training Course

Ακροατήριο:

Το μάθημα προορίζεται για ειδικούς πληροφορικής που αναζητούν μια λύση αποθήκευσης και επεξεργασίας μεγάλων συνόλων δεδομένων σε περιβάλλον κατανεμημένου συστήματος

Goal:

Βαθιά γνώση σχετικά με Hadoop διαχείριση συστάδων.

Όταν οι παραδοσιακές τεχνολογίες αποθήκευσης δεν χειρίζονται την ποσότητα των δεδομένων που χρειάζεστε για να αποθηκεύσετε, υπάρχουν εναλλακτικές λύσεις. Αυτό το μάθημα προσπαθεί να καθοδηγήσει τους συμμετέχοντες ποιες είναι οι εναλλακτικές λύσεις για την αποθήκευση και ανάλυση των Big Data και ποια είναι τα πλεονεκτήματα και τα μειονεκτήματά τους.

Αυτό το μάθημα επικεντρώνεται κατά κύριο λόγο στη συζήτηση και την παρουσίαση λύσεων, αν και οι πρακτικές ασκήσεις είναι διαθέσιμες κατόπιν αιτήματος.

Το μάθημα αποτελεί μέρος του συνόλου δεξιοτήτων Data Scientist (Domain: Data and Technology).

Αυτή η εκπαιδευτική ενημέρωση σε ύφεση (online ή offline) στο Ελλάδα είναι προσανατολισμένη προς διαχειριστές βάσεων δεδομένων ή αναπτυξτές που επιθυμούν να χρησιμοποιήσουν Microsoft Azure Cosmos DB για την ανάπτυξη και διαχείριση εφαπής εφαπλωμένων και χαμηλής καθυστερήσεως εφαρμογών.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Προβλέψουν τους απαραίτητους πόρους Cosmos DB για να ξεκινήσουν την κατασκευή βάσεων δεδομένων και εφαρμογών.
• Μεγαλώσουν την απόδοση και την αποθήκευση της εφαρμογής χρησιμοποιώντας APIs στο Cosmos DB. 
• Διαχειρίζονται τις λειτουργίες των βάσεων δεδομένων και μειώνουν τους έξοδους εκπληρώνοντας τους πόρους Cosmos DB.

Το μάθημα είναι αφιερωμένο σε ειδικούς πληροφορικής που αναζητούν μια λύση αποθήκευσης και επεξεργασίας μεγάλων συνόλων δεδομένων σε περιβάλλον κατανεμημένου συστήματος

Στόχος του μαθήματος:

Απόκτηση γνώσεων σχετικά με τη διαχείριση συμπλεγμάτων Hadoop

Το Apache Hadoop είναι το πιο δημοφιλές πλαίσιο για επεξεργασία Big Data σε συμπλέγματα διακομιστών. Σε αυτό το μάθημα τριών (προαιρετικά, τεσσάρων) ημερών, οι συμμετέχοντες θα μάθουν για τα επιχειρηματικά οφέλη και τις περιπτώσεις χρήσης για το Hadoop και το οικοσύστημά του, πώς να σχεδιάσουν την ανάπτυξη και ανάπτυξη συμπλεγμάτων, πώς να εγκαταστήσουν, να διατηρήσουν, να παρακολουθήσουν, να αντιμετωπίσουν προβλήματα και να βελτιστοποιήσουν [2 ]. Θα εξασκηθούν επίσης στη φόρτωση μαζικών δεδομένων συμπλέγματος, θα εξοικειωθούν με διάφορες Hadoop διανομές και θα εξασκηθούν στην εγκατάσταση και διαχείριση Hadoop εργαλείων οικοσυστήματος. Το μάθημα ολοκληρώνεται με συζήτηση για την εξασφάλιση συμπλέγματος με το Kerberos.

«…Τα υλικά ήταν πολύ καλά προετοιμασμένα και καλυμμένα καλά. Το εργαστήριο ήταν πολύ εξυπηρετικό και καλά οργανωμένο”
— Andrew Nguyen, Principal Integration Engineer DW, Microsoft Online Advertising

Ακροατήριο

Hadoop διαχειριστές

Σχήμα και διάταξις βιβλίου

Διαλέξεις και πρακτικά εργαστήρια, κατά προσέγγιση ισορροπία 60% διαλέξεις, 40% εργαστήρια.

Το Apache Hadoop είναι το πιο δημοφιλές πλαίσιο για την επεξεργασία του Big Data σε συμπλέγματα διακομιστών. Αυτό το μάθημα θα εισάγει έναν προγραμματιστή σε διάφορα στοιχεία (HDFS, MapReduce, Pig, Hive και HBase) Hadoop οικοσύστημα.

Το Apache Hadoop είναι ένα από τα πιο δημοφιλή πλαίσια για την επεξεργασία του Big Data σε συμπλέγματα διακομιστών. Αυτό το μάθημα εμβαθύνει στη διαχείριση δεδομένων σε HDFS, advanced Pig, Hive και HBase. Αυτές οι προηγμένες τεχνικές προγραμματισμού θα είναι ωφέλιμες για έμπειρους Hadoop προγραμματιστές.

Κοινό : προγραμματιστές

Διάρκεια: τρεις ημέρες

Μορφή: διαλέξεις (50%) και πρακτικά εργαστήρια (50%).

Ακροατήριο:

Αυτό το μάθημα έχει σκοπό να απομυθοποιήσει την τεχνολογία μεγάλων δεδομένων/hadoop και να δείξει ότι δεν είναι δύσκολο να κατανοηθεί.

Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) εισάγει το Hortonworks Data Platform (HDP) και καθοδηγεί τους συμμετέχοντες στην ανάπτυξη της λύσης Spark + Hadoop.

Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:

• Χρησιμοποιήστε το Hortonworks για αξιόπιστη εκτέλεση του Hadoop σε μεγάλη κλίμακα.
• Ενοποιήστε τις δυνατότητες ασφάλειας, διακυβέρνησης και λειτουργίας του Hadoop με τις ευέλικτες αναλυτικές ροές εργασίας του Spark.
• Χρησιμοποιήστε το Hortonworks για να διερευνήσετε, να επικυρώσετε, να πιστοποιήσετε και να υποστηρίξετε καθένα από τα στοιχεία ενός έργου Spark.
• Επεξεργαστείτε διαφορετικούς τύπους δεδομένων, συμπεριλαμβανομένων των δομημένων, μη δομημένων, εν κινήσει και ηρεμίας.

Αυτό το μάθημα καλύπτει τον τρόπο χρήσης της γλώσσας Hive SQL (AKA: Hive HQL, SQL σε Hive , Hive QL) για άτομα που εξάγουν δεδομένα από την Hive

Το Cloudera Impala είναι μια μηχανή αναζήτησης ανοιχτού κώδικα μαζικής παράλληλης επεξεργασίας (MPP) SQL για συμπλέγματα Apache Hadoop.

Το Impala επιτρέπει στους χρήστες να εκδίδουν ερωτήματα χαμηλής καθυστέρησης SQL σε δεδομένα που είναι αποθηκευμένα στο Hadoop Κατανεμημένο Σύστημα Αρχείων και στο Apache Hbase χωρίς να απαιτείται μετακίνηση ή μετατροπή δεδομένων.

Ακροατήριο

Αυτό το μάθημα απευθύνεται σε αναλυτές και επιστήμονες δεδομένων που πραγματοποιούν ανάλυση δεδομένων που είναι αποθηκευμένα στο Hadoop μέσω Business Intelligence ή SQL εργαλείων.

Μετά από αυτό το μάθημα οι σύνεδροι θα μπορούν

• Εξάγετε σημαντικές πληροφορίες από Hadoop συμπλέγματα με Impala.
• Γράψτε συγκεκριμένα προγράμματα για να διευκολύνετε την Business Ευφυΐα στη Impala SQL Διάλεκτο.
• Αντιμετώπιση προβλημάτων Impala.

Οι σχεσιακές βάσεις δεδομένων ήταν η τεχνολογία της επιλογής για την αποθήκευση, την ανάκτηση και την ερώτηση δεδομένων. Οι σχεσιακές βάσεις δεδομένων επιτρέπουν στους χρήστες να οργανώνουν τα δεδομένα τους χρησιμοποιώντας ένα δομημένο, σαφώς καθορισμένο σύνολο προτύπων (μοντέλο). Ενώ αυτή η προσέγγιση λειτουργεί καλά για την αποθήκευση δεδομένων που είναι τυποποιημένα και καλά κατανοητά εκ των προτέρων (σκεφτείτε μια εφαρμογή ελέγχου νοσοκομείων που κρατά αρχεία ασθενών με το ίδιο σταθερό σύνολο προκαθορισμένων πεδίων ... id ασθενούς, όνομα, τελευταίο όνομα, ημερομηνία της τελευταίας επίσκεψης κ.λπ.), υπάρχουν περιορισμοί σε αυτό το μοντέλο. Για οργανισμούς των οποίων τα εισερχόμενα δεδομένα δεν είναι καλά καθορισμένα (σκεφτείτε ένα ηλεκτρονικό έντυπο αίτησης για εκκίνηση, το οποίο εξακολουθεί να βρίσκεται σε διαδικασία πειραματισμού με διαφορετικά πεδία για τη συλλογή δεδομένων επισκεπτών, την κατάργηση και την προσθήκη πεδίων, καθώς προχωρούν για να προσαρμόσουν την μεταβαλλόμενη φύση επιχειρήσεις), θα πρέπει να επαναπροσδιορίζονται τακτικά ορισμένοι ορισμοί για τον τρόπο με τον οποίο τα δεδομένα πρέπει να χωρέσουν σε μια υπάρχουσα βάση δεδομένων. Αυτό θα απαιτούσε την αναδημιουργία του μοντέλου δεδομένων (σχήμα) που υπαγορεύει τη δομή των δεδομένων και τους επιτρεπόμενους τύπους δεδομένων για την υποστήριξη διαφορετικών τύπων δεδομένων εισόδου κ.λπ., πριν να αποθηκευτούν νέα δεδομένα στη βάση δεδομένων.

Εισαγάγετε Δεν υπάρχουν βάσεις δεδομένων SQL (όχι μόνο SQL ). Δεν υπάρχουν βάσεις δεδομένων SQL ελεύθεροι χρήστες από την ανάγκη να προκαθορίσουν τη δομή των εισερχόμενων δεδομένων, επιτρέποντάς τους να εισάγουν και να ενημερώσουν νέα δεδομένα εν πτήσει. Καμία SQL δεδομένων SQL δεν είναι συχνά ταχύτερη από τις σχεσιακές βάσεις δεδομένων και μπορεί εύκολα να χειριστεί πολύ μεγάλα ποσά δεδομένων. Δεν υπάρχουν βάσεις δεδομένων SQL να κλιμακώνονται καλύτερα από τις σχεσιακές βάσεις δεδομένων, λόγω της ικανότητάς τους να κατανέμουν αποτελεσματικά τα δεδομένα σε πολλούς διακομιστές (συμπλέγματος) και να εξισορροπεί το φορτίο της πρόσβασης σε αυτά τα δεδομένα. Δεν υπάρχουν βάσεις δεδομένων SQL ενσωματώνονται ιδιαίτερα καλά με εφαρμογές που υποστηρίζουν αναλύσεις σε πραγματικό χρόνο, εξατομίκευση ιστότοπου, διαδίκτυο και εφαρμογές για κινητά

Σε αυτή την εκπαιδευτική άσκηση, οι συμμετέχοντες θα κατανοήσουν την αρχιτεκτονική, τις αρχές σχεδιασμού και τη λειτουργικότητα των πιο δημοφιλών βάσεων δεδομένων No SQL στην αγορά καθώς εγκαθιστούν, λειτουργούν και αξιολογούν μια σειρά βάσεων δεδομένων χωρίς SQL σε περιβάλλον εργαστηρίου. Ο στόχος αυτής της εκπαίδευσης είναι να εξοπλίσει τους συμμετέχοντες με την ικανότητα να αξιολογούν έξυπνα, να προτείνουν και να εφαρμόζουν μια κατάλληλη λύση βάσης δεδομένων No SQL μέσα στην οργάνωσή τους.

Μέχρι τη λήξη αυτής της εκπαίδευσης, οι συμμετέχοντες θα μπορούν:

• Εγκαταστήστε και διαμορφώστε διαφορετικούς τύπους βάσεων δεδομένων χωρίς SQL , συμπεριλαμβανομένων των MongoDB , Cassandra , Redis και Neo4j
• Κατανοήστε τα οφέλη και τα μειονεκτήματα των βάσεων δεδομένων SQL σχεσιακές βάσεις δεδομένων
• Κατανοήστε τις υποκείμενες μορφές δεδομένων που χρησιμοποιούνται από SQL βάσεις δεδομένων No SQL και πώς αυτές οι μορφές μπορούν να χρησιμοποιηθούν σε πλεονέκτημα κατά την ανάπτυξη σύγχρονων εφαρμογών (desktop, mobile, cloud, IoT)
• Εκτελέστε τη δημιουργία, εισαγωγή, ενημέρωση, διαγραφή λειτουργιών σε μια SQL δεδομένων No SQL
• Ρυθμίστε ένα μικτό περιβάλλον τόσο με μια σχεσιακή βάση δεδομένων όσο και με το No SQL working in tandem
• Διαμορφώστε ένα σύμπλεγμα βάσης δεδομένων No SQL για κατανεμημένη επεξεργασία πολύ μεγάλων συνόλων δεδομένων
• Κατανοήστε τις συνέπειες της ασφάλειας από τη χρήση μιας βάσης δεδομένων No SQL
• Ανάπτυξη και κλιμάκωση μιας βάσης δεδομένων No SQL σε περιβάλλον παραγωγής

Κοινό

• Επαγγελματίες Database
• Αρχιτέκτονες δεδομένων
• Στρατηγικοί δεδομένων
• Διαχειριστές έργων
• Οι προγραμματιστές εφαρμογών που επιθυμούν να ενσωματώσουν μια ευέλικτη λύση βάσης δεδομένων στην εφαρμογή τους

Μορφή του μαθήματος

• Διάλεξη μέρους, μερική συζήτηση, ασκήσεις και βαριά πρακτική άσκηση

Σημείωση

• Για να ζητήσετε μια προσαρμοσμένη εκπαίδευση για αυτό το μάθημα, επικοινωνήστε μαζί μας για να κανονίσετε.

redis

nosql

Το Scylla είναι ένας ανοιχτός κώδικας κατανεμημένος χώρος αποθήκευσης δεδομένων NoSQL. Είναι συμβατό με το Apache Cassandra αλλά αποδίδει σε σημαντικά υψηλότερες εντολές και χαμηλότερες καθυστερήσεις.

Σε αυτό το μάθημα, οι συμμετέχοντες θα μάθουν για τα χαρακτηριστικά και την αρχιτεκτονική του Scylla ενώ θα αποκτήσουν πρακτική εμπειρία με τη ρύθμιση, τη διαχείριση, την παρακολούθηση και την αντιμετώπιση προβλημάτων του Scylla.

Ακροατήριο

Database διαχειριστές Προγραμματιστές Μηχανικοί Συστήματος

Μορφή του μαθήματος

Το μάθημα είναι διαδραστικό και περιλαμβάνει συζητήσεις για τις αρχές και τις προσεγγίσεις για την ανάπτυξη και τη διαχείριση κατανεμημένων βάσεων δεδομένων και συμπλεγμάτων Scylla. Το μάθημα περιλαμβάνει ένα βαρύ συστατικό πρακτικών ασκήσεων και εξάσκησης.