Једна од најатрактивнијих карактеристика Хадооп оквира је његова употреба робног хардвера . Међутим, ово доводи до честих падова ДатаНоде-а у Хадооп кластеру. Још једна упечатљива карактеристика Хадооп Фрамеворк-а је једноставност обима у складу са брзим растом обима података . Због ова два разлога, један од најчешћих задатака администратора Хадооп-а је да провизија (Додај) и разградња (Уклони) Чворови података у Хадооп кластеру.
шта је непроменљиви објекат у јави
Чворови за пуштање у рад и разградњу у кластеру Хадооп:
Изнад дијаграм приказује корак по корак процес уклањања ДатаНоде из кластера.
Први задатак је ажурирање „ искључити ‘Датотеке за обоје ХДФС (хдфс-сите.кмл) и Карта смањити (мапред-сите.кмл).
Датотека „изузми“:
- фор јобтрацкер садржи листу хостова које би посао за праћење требао изузети. Ако је вредност празна, ниједан домаћин није изузет.
- за Наменоде садржи листу хостова којима није дозвољено повезивање са Наменодеом.
Ево примера конфигурације за датотеку за изузимање у хдфс-сите.кмл и мапред-сите.кмл:
хдфс-сите.кмл
дфс.хостс.екцлуде
/ хоме / хадооп / искључује
истина
мапред-сите.кмл
мапред.хостс.екцлуде
/ хоме / хадооп / искључује
истина
Белешка: Пуно име датотеке мора бити наведено.
Слично томе, имамо и датотеке „укључи“:
- фор јобтрацкер који садржи листу чворова који се могу повезати на ЈобТрацкер. Ако је вредност празна, дозвољени су сви хостови.
- за Наменоде садржи списак хостова којима је дозвољено повезивање са Наменодеом. Ако је вредност празна, дозвољени су сви хостови.
„ дфсадмин ' и ' мрадмин 'Команде освежавају конфигурацију променама како би постале свесне новог чвора.
„ робови Датотека на главном серверу садржи листу свих чворова података. Ово се такође мора ажурирати како би се обезбедило било каквих проблема у будућем хадооп демону старт / стоп.
Важан корак у процесу комисионирања чвора података је покретање баланса кластера.
> хадооп балансер -праг 40
Балансер покушава да обезбеди равнотежу до одређеног прага међу чворовима података копирањем блоковских података из старијих чворова у новонаручене чворове.
Дакле, ово можете учинити - Пуштање у рад и Разградња Чворови у Хадооп кластеру.
Имате питање за нас? Молимо вас да то споменете у одељку за коментаре и јавићемо вам се.
Сродне везе: