職責(zé)描述:
1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)Hadoop集群的業(yè)務(wù)運(yùn)維工作,針對(duì)集群故障進(jìn)行快速排查和修復(fù);
2、負(fù)責(zé)集群容量規(guī)劃和性能優(yōu)化,支撐業(yè)務(wù)和數(shù)據(jù)量的快速增長(zhǎng);
3、參與大數(shù)據(jù)基礎(chǔ)架構(gòu)的規(guī)劃、設(shè)計(jì)與實(shí)施工作;
4、跟進(jìn)大數(shù)據(jù)技術(shù)研究的大方向,做新技術(shù)預(yù)研工作;
?
任職資格:
1、3年以上hadoop集群運(yùn)維經(jīng)驗(yàn),熟練掌握Linux操作系統(tǒng),熟悉linux文件系統(tǒng),內(nèi)核,網(wǎng)絡(luò)等性能優(yōu)化;
2、熟悉HDFS、YARN、Hive、HBase、Spark、ES、Flink、Kafka等hadoop生態(tài)技術(shù)的體系結(jié)構(gòu)和運(yùn)行原理;
3、具備具備大規(guī)模集群部署管理、很強(qiáng)的故障排查能力和調(diào)優(yōu)能力,能夠快速準(zhǔn)確的定位集群故障并給出切實(shí)可行的解決方案;
4、熟悉python/JAVA一種變成語(yǔ)言,有一定開(kāi)發(fā)經(jīng)驗(yàn),熟悉使用ansible、salt等自動(dòng)化運(yùn)行工具;
5、具有較強(qiáng)的責(zé)任心和團(tuán)隊(duì)精神,具有良好的溝通交流和快速學(xué)習(xí)能力。