Πώς να ρυθμίσετε την υψηλή διαθεσιμότητα για τη Διαχείριση πόρων – Μέρος 6

Το YARN είναι το Επίπεδο επεξεργασίας του Hadoop, το οποίο αποτελείται από το Master (Resource Manager) και το Slave Υπηρεσίες (Node Manager) για την επεξεργασία των δεδομένων. Το Resource Manager (RM) είναι το κρίσιμο στοιχείο που είναι υπεύθυνο για την κατανομή και τη διαχείριση πόρων μεταξύ όλων των εργασιών που εκτελούνται στο Hadoop Cluster.

Συνιστάται πάντα και βέλτιστη πρακτική να είναι ενεργοποιημένη η Υψηλή διαθεσιμότητα συμπλέγματος (HA) σε Κρίσιμες υπηρεσίες όπως η Namenode και η Διαχείριση πόρων<.

Απαιτήσεις

• Βέλτιστες πρακτικές για την ανάπτυξη του διακομιστή Hadoop στο CentOS/RHEL 7 – Μέρος 1
• Ρύθμιση προαπαιτούμενων Hadoop και σκλήρυνσης ασφαλείας – Μέρος 2
• Πώς να εγκαταστήσετε και να ρυθμίσετε το Cloudera Manager στο CentOS/RHEL 7 – Μέρος 3
• Πώς να εγκαταστήσετε το CDH και να ρυθμίσετε τις τοποθετήσεις υπηρεσίας στο CentOS/RHEL 7 – Μέρος 4
• Πώς να ρυθμίσετε την υψηλή διαθεσιμότητα για το Namenode – Μέρος 5

Σε αυτό το άρθρο, θα δούμε τα βήματα για την ενεργοποίηση της Υψηλής διαθεσιμότητας στη Διαχείριση πόρων.

Ενεργοποίηση υψηλής διαθεσιμότητας στη Διαχείριση πόρων

1. Μεταβείτε στο Cloudera Manager στις ακόλουθες διευθύνσεις και μεταβείτε στο YARN –> Ενέργειες –> Ενεργοποίηση υψηλής διαθεσιμότητας.

http://13.233.129.39:7180/cmf/home

2. Επιλέξτε έναν διακομιστή στον οποίο θα έχετε έναν δεύτερο Διαχειριστή πόρων. Συνήθως, θα έχουμε έναν δεύτερο κύριο διακομιστή για την ανάπτυξη της Υψηλής Διαθεσιμότητας. Εδώ, επιλέγουμε το master2 για να ενεργοποιήσουμε το HA.

3. Αφού επιλέξετε το master2, κάντε κλικ στην επιλογή "Συνέχεια" για να συνεχίσετε.

4. Θα ξεκινήσει η ενεργοποίηση της διαδικασίας HA. Μπορείτε να δείτε τις λειτουργίες παρασκηνίου κάνοντας κλικ σε κάθε βήμα.

5. Μόλις ολοκληρωθούν όλες οι διαδικασίες, θα λάβετε την κατάσταση "Ολοκληρώθηκε". Κάντε κλικ στην επιλογή "Τέλος".

6. Επαληθεύστε την υψηλή διαθεσιμότητα του Resource Manager προβάλλοντας τις παρουσίες Yarn στο Cloudera Manager –> YARN –> Περιπτώσεις.

Μπορείτε να δείτε δύο Διαχείριση πόρων, το ένα θα βρίσκεται στην κατάσταση "Ενεργό", το άλλο θα είναι σε "Αναμονή".

συμπέρασμα

Σε αυτό το άρθρο, ακολουθήσαμε τη διαδικασία βήμα προς βήμα για να ενεργοποιήσουμε την Υψηλή διαθεσιμότητα στη Διαχείριση πόρων. Κάθε φορά που η Active Resource Manager απενεργοποιείται, η Standby Resource Manager θα γίνεται Ενεργή έτσι ώστε η παραγωγή να μην έχει διακοπές.