1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的各項(xiàng)運(yùn)維管理工作;
2、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的應(yīng)用監(jiān)控、容量管理,應(yīng)急響應(yīng)等;
3、負(fù)責(zé)平臺(tái)的運(yùn)維規(guī)范制定,運(yùn)維自動(dòng)化工具與平臺(tái)的研究和實(shí)現(xiàn);
4、負(fù)責(zé)數(shù)據(jù)ETL的配置以及過(guò)程的監(jiān)控,保證數(shù)據(jù)對(duì)接;
5、負(fù)責(zé)運(yùn)維數(shù)據(jù)的匯總,并撰寫(xiě)運(yùn)維報(bào)告和報(bào)表。
職位要求:
1、本科以上;計(jì)算機(jī)科學(xué)與技術(shù)、軟件工程、網(wǎng)絡(luò)工程、電子信息工程等專業(yè);
2、有二年以上Hadoop系統(tǒng)實(shí)際維護(hù)經(jīng)驗(yàn);熟悉Hadoop大數(shù)據(jù)生態(tài)圈,包括但不限于HDFS、YARN、Hive、HBase、Spark、kafka、nifi等
3、有Linux環(huán)境和常用命令使用經(jīng)驗(yàn);
4、有hadoop及核心組件(Hive、Spark)性能優(yōu)化經(jīng)驗(yàn)的優(yōu)先考慮
5、有Docker體系的安裝與配置經(jīng)驗(yàn)優(yōu)先考慮;有ETL和調(diào)度系統(tǒng)配置、監(jiān)控、維護(hù)經(jīng)驗(yàn)優(yōu)先;
6、掌握Python、Shell,了解其他開(kāi)發(fā)語(yǔ)言尤佳,具備基本SQL編寫(xiě)能力;掌握Z(yǔ)abbix/Cacti/Nagios等監(jiān)控管理工具之一,了解ELK技術(shù)尤佳;掌握oracle、DB2、mysql、GP等其中一種數(shù)據(jù)庫(kù)技術(shù);
7、有高度的責(zé)任感、上進(jìn)心、主動(dòng)性、團(tuán)隊(duì)合作和敬業(yè)精神;
8、良好的溝通表達(dá)能力、理解能力、執(zhí)行能力、承受壓力能力和自我管理能力;
9、具備較強(qiáng)的邏輯能力、良好的執(zhí)行能力和認(rèn)真負(fù)責(zé)的態(tài)度。