Course Outline
- Εισαγωγή Hadoop ιστορία, έννοιες Διανομές οικοσυστήματος Αρχιτεκτονική υψηλού επιπέδου Hadoop μύθοι Hadoop προκλήσεις (υλισμικό / λογισμικό) Εργαστήρια: συζητήστε τα έργα και τα προβλήματά σας Big Data
- Έννοιες λειτουργιών HDFS (οριζόντια κλιμάκωση, αναπαραγωγή, τοποθεσία δεδομένων, επίγνωση rack) Κόμβοι και δαίμονες (NameNode, Secondary NameNode, HA Standby NameNode, DataNode) Παρακολούθηση υγείας Γραμμή εντολών και διαχείριση βάσει προγράμματος περιήγησης Προσθήκη αποθήκευσης, αντικατάσταση ελαττωματικών μονάδων δίσκου Labs: εξοικείωση με γραμμές εντολών HDFS
- Λειτουργίες και διαχείριση MapReduce Παράλληλος υπολογισμός πριν από τη μείωση του χάρτη: συγκρίνετε HPC έναντι Hadoop διαχείρισης MapReduce φορτία συμπλέγματος Κόμβοι και δαίμονες (JobTracker, TaskTracker) Διαμόρφωση MapReduce διεπαφής χρήστη Διαμόρφωση εργασίας Βελτιστοποίηση του MapReduce Αντιμετώπιση ανόητων MR: τι να πει στους προγραμματιστές που τρέχουν: Παραδείγματα MapReduce
- Προηγμένα θέματα Παρακολούθηση υλικού Παρακολούθηση συμπλέγματος Προσθήκη και αφαίρεση διακομιστών, αναβάθμιση Hadoop Δημιουργία αντιγράφων ασφαλείας, ανάκτηση και σχεδιασμός επιχειρησιακής συνέχειας Ροές εργασιών Oozie Hadoop υψηλή διαθεσιμότητα (HA) Hadoop Ομοσπονδία Ασφάλιση του συμπλέγματος σας με τα Kerberos Labs: ρύθμιση παρακολούθησης
Requirements
- άνετα με τη βασική διαχείριση συστήματος Linux
- βασικές δεξιότητες σεναρίου
Δεν απαιτείται γνώση του Hadoop και του Κατανεμημένου Υπολογισμού, αλλά θα εισαχθεί και θα εξηγηθεί στο μάθημα.
Εργαστηριακό περιβάλλον
Zero Install : Δεν χρειάζεται να εγκαταστήσετε λογισμικό hadoop στα μηχανήματα των μαθητών! Θα παρασχεθεί ένα εργασιακό σύμπλεγμα hadoop για τους μαθητές.
Οι μαθητές θα χρειαστούν τα ακόλουθα
- ένας πελάτης SSH (Linux και ο Mac έχουν ήδη προγράμματα-πελάτες ssh, για το Windows Putty συνιστάται)
- ένα πρόγραμμα περιήγησης για πρόσβαση στο σύμπλεγμα. Συνιστούμε το πρόγραμμα περιήγησης Firefox με εγκατεστημένη την επέκταση FoxyProxy
Testimonials (3)
I thought he did a great job of tailoring the experience to the audience. This class is mostly designed to cover data analysis with HIVE, but me and my co-worker are doing HIVE administration with no real data analytics responsibilities.
ian reif - Franchise Tax Board
Course - Data Analysis with Hive/HiveQL
Many hands-on sessions.
Jacek Pieczątka
Course - Administrator Training for Apache Hadoop
practical things of doing, also theory was served good by Ajay