Course Outline

1: HDFS (17%)

  • Περιγράψτε τη λειτουργία των δαιμόνων HDFS
  • Περιγράψτε την καθομιλήτρια λειτουργία ενός αποκλείσιμου συνόλου Apache Hadoop, τόσο για τη μάζα δεδομένων που αποθηκεύονται όσο και για τη μάζα προεξόφλησης.
  • Αναγνωρίστε τα σημερινά χαρακτηριστικά των εποπτικών συστημάτων που ενθαρρύνουν ένα σύστημα όπως το Apache Hadoop.
  • Κατηγορία απόψεις για την δημιουργία HDFS
  • Δίνοντας μια επισκήπτη, ιδάνται κατάλληλες χρήσεις για το πρόσωπο HDFS Federation
  • Αναγνωρίζετε τα συστατικά και δάιμονα ενός HDFS HA-Quorum cluster
  • Αναλύστε την ρόλω HDFS ασφαλεία (Kerberos)
  • Επιλέξτε το καλύτερο διάθεσμα σεριαλιζατών για μια εδραίωση
  • Περιγράψτε τους περιόδους ανάγνωση και γραφή αρχείο
  • Αναγνώριστε τις εντολές να μετασχηματίζει αρχεία στο Hadoop File System Shell

2: YARN και MapReduce version 2 (MRv2) (17%)

  • Συνειδητοποιήστε πώς το αναβάθμισμα ενός συνόλου από Hadoop 1 σε Hadoop 2 επηρεάζει τις ρυθμίσεις του συνολού
  • Συνειδητοποιήστε πώς να διαχειρίζεστε MapReduce v2 (MRv2 / YARN), συμπεριλαμβανομένων όλων των YARN daemons
  • Συνειδητοποιήστε τη βασική στρατηγική σχεδιασμού για MapReduce v2 (MRv2)
  • Αναπτύξτε πώς YARN διαχειρίζεται τους αλληλοδεήσεις πόρων
  • Αναγνώριστε τη διαδρομή εργασίας MapReduce job σε YARN
  • Δέχτε ποια αρχεία πρέπει να αλλάξετε και πώς για να μεταφερθεί ενός συνολού από MapReduce version 1 (MRv1) σε MapReduce version 2 (MRv2) την ρύθμιση YARN.

3: Hadoop Cluster Planning (16%)

  • Κύριες σημασίες να αναλυθούν στην επιλογή του κάρτστου και των συστημάτων λειτουργίας που θα φιλοξενήσει μια αποκλείσιμη Apache Hadoop.
  • Αναλύστε τις επιλογές στην επιλογή OS
  • Συνειδητοποιήστε τους νόμους αρχίων και δίσκων παλινδρομής
  • Δίνοντας μια επισκήπτη και τυπικό λειτουργικό χώρου, αναγνώριστε ένα συστήματος διαίρεσης ελέγχων κατάλληλη για την επισκήπτη
  • Δίνοντας μια συμβουλευτική χρηματοδότηση, προβάλετε τους εισπράξεις τοποθεσία των δοκιμών για να πέφτει σε λειτουργικό κύκλο
  • Μέγεθος μονάδα: Δίνοντας μια επισκήπτη και τυπικό προσαρμογής, αναγνώριστε τα στοιχεία για τη λειτουργική δοκιμή, συμπεριλαμβανομένων CPU, μνήμης, αποθήκευσης και I/O δίσκου
  • Μέγεθος και σχεδιασμός των δίσκων, περιλαμβάνοντας JBOD υπέρ RAID, SANs, εικονικοποίηση και απαιτήσεις μεγέθους δίσκου σε ένα σύνολο
  • Δικτυακά σχέδια: Συνειδητοποιήστε τη χρήση δικτύου Hadoop (όχι μόνο HDFS, αλλά και MapReduce) και προτείνετε ή αναγνώριστε σημαντικά στοιχεία για την δικτυακή διάθεση για μια επισκήπτη

4: Hadoop Cluster Installation and Administration (25%)

  • Δίνοντας μια συμβουλευτική χρηματοδότηση, αναγνώριστε πώς θα αντιμετωπίσει το σύνολο τα νέα δίσκου και μηχανής
  • Αναλύστε μια ρυθμίσεις αρχεία και εγγράφων στοιχεία για τη διαδικασία
  • Συνειδητοποιήστε τα βασικά μέτρα και επόψεις αξιοπιστίας Hadoop cluster
  • Αναγνώριστε τη λειτουργία και χάρη των δυνατών εργαλείων για την παρακολούθηση cluster
  • Μπορεί να εγκαταστήσει όλες τις δυνατές συστάδες μέρους CDH 5, περιλαμβανομένων (όχι μόνο): Impala, Flume, Oozie, Hue, Manager, Sqoop, Hive και Pig
  • Αναγνώριστε τη λειτουργία και χάρη των δυνατών εργαλείων για να διαχειρίζεται το Apache Hadoop αρχείο σύστημα

5: Resource Management (10%)

  • Συνειδητοποιήστε τους κύριους σχεδία δομής για όλα Hadoop προγραμματιστές
  • Δίνοντας μια επισκήπτη, αναπτύξτε πώς ο FIFO Scheduler διαχειρίζεται τους πόρους cluster
  • Δίνοντας μια επισκήπτη, αναπτύξτε πώς ο κοινός προγραμματιστής διαχειρίζεται τους πόρους cluster υπό YARN
  • Δίνοντας μια επισκήπτη, αναπτύξτε πώς ο Capacity Scheduler διαχειρίζεται τους πόρους cluster

6: Monitoring and Logging (15%)

  • Συνειδητοποιήστε τα εργαλεία και χαρακτηριστικά Hadoop στοιχεία για την αξιολόγηση
  • Αναλύστε τους NameNode και JobTracker Web UIs
  • Συνειδητοποιήστε πώς να παρακολουθήσετε cluster Daemons
  • Αναγνώριστε και παρακολούθηστε τη χρήση CPU στα κυβερνήτρια κόμβου
  • Περιγράψτε πώς να παρακολουθήσετε swap και αποδοχή μνήμης σε όλους τους κόμβους
  • Αναγνώριστε πώς να δείτε και διαχειρίζεστε τα αρχεία εγγράφων Hadoop
  • Αποδοχή ένα αρχείο

Requirements

  • Βασικές δεξιότητες επιμέλειας Linux
  • Βασικές προγραμματιστικές δεξιότητες
 35 Hours

Number of participants


Price per participant

Testimonials (3)

Upcoming Courses

Related Categories