Са повећаним усвајањем Хадооп-а у традиционалним ИТ решењима за предузећа и повећаним бројем примена Хадооп-а у производном окружењу, потреба за стручњацима Хадооп-ових операција и администрације да се брину о великим Хадооп кластерима постаје витална.
Одговорности администратора Хадооп-а:
- Одговоран за имплементацију и текућу администрацију Хадооп инфраструктуре.
- Усклађивање са тимом системског инжењера да предложи и примени ново хардверско и софтверско окружење потребно за Хадооп и да прошири постојеће окружење.
- Рад са тимовима за доставу података на подешавању нових Хадооп корисника. Овај посао укључује подешавање Линук корисника, подешавање Керберос принципала и тестирање ХДФС, Хиве, Пиг и МапРедуце приступа за нове кориснике.
- Одржавање кластера, као и стварање и уклањање чворова помоћу алата попут Ганглиа, Нагиос, Цлоудера Манагер Ентерприсе, Делл Опен Манаге и других алата.
- Подешавање перформанси кластера Хадооп и рутина Хадооп МапРедуце.
- Сцреен Хадооп перформансе послова кластера и планирање капацитета
- Надгледајте повезаност и сигурност Хадооп кластера
- Управљајте и прегледајте датотеке евиденције Хадооп.
- Управљање и надгледање система датотека.
- Подршка и одржавање ХДФС-а.
- Вриједно удруживање с инфраструктуром, мрежом, базом података, апликацијама и тимовима пословне интелигенције како би се гарантовао висок квалитет података и доступност.
- Сарадња са апликационим тимовима за инсталирање ажурирања оперативног система и Хадооп-а, закрпа и надоградњи верзија када је то потребно.
- Тачка контакта за ескалацију добављача
Хадооп администрација је корисна и уносна каријера са пуно прилика за раст. Ако вас горе наведене одговорности за посао занимају, време је да се усавршите са администрацијом Хадооп и кренете на пут каријере администратора Хадооп-а.
јава управо у време компајлер
ДБА одговорности које обавља Хадооп администратор:
- Моделирање података, дизајн и имплементација засновани на признатим стандардима.
- Инсталација и конфигурација софтвера.
- Израда резервних копија и опоравак базе података.
- Повезивање и сигурност базе података.
- Праћење и подешавање перформанси.
- Управљање простором на диску.
- Софтверске закрпе и надоградње.
- Аутоматизујте ручне задатке.
Одговорности за развој ДВХ обавља Хадооп Администратор:
ДВХ администрира послове, укључујући развој, тестирање и надгледање серијских послова за следеће задатке:
- Осигурајте референтни интегритет.
- Извршите извршење примарног кључа.
- Остваривање поновних података.
- Правовремено учитајте велике количине података.
Сад кад знате за радне обавезе администратора Хадооп-а, погледајмо вештине потребне за то.
Вештине потребне да бисте постали Хадооп администратор:
- Општа оперативна стручност, попут добрих вештина за решавање проблема, разумевање капацитета система, уских грла, основа меморије, ЦПУ-а, ОС-а, меморије и мрежа.
- Хадооп вештине попут ХБасе, Хиве, Пиг, Махоут, итд.
- Најважнији захтеви су: Требали би бити у стању да приме Хадооп кластер, додају и уклањају чворове, прате послове, надгледају критичне делове кластера, конфигуришу високу расположивост чвора имена, распоређују и конфигуришу и праве резервне копије.
- Добро познавање Линука јер Хадооп ради на Линуксу.
- Упознавање са алаткама за управљање конфигурацијом и применом отвореног кода као што су Пуппет или Цхеф и Линук скриптирање.
- Знање о решавању проблема са основним Јава апликацијама је плус.
Едурека је посебно припремила курс о администрацији Хадооп. Кликните на доње дугме да бисте започели са Хадооп администрацијом и научили како вам курс помаже да постанете Хадооп администратор.
Повезани постови:
шта су пакети у јави