大數(shù)據(jù)研發(fā)工程師:
職位描述:
1、基于Hadoop進(jìn)行基礎(chǔ)管理平臺(tái)架構(gòu)設(shè)計(jì)與產(chǎn)品研發(fā);
2、跟蹤并研究Hadoop技術(shù)架構(gòu)和相關(guān)分布式技術(shù)的發(fā)展;
3、負(fù)責(zé)大數(shù)據(jù)平臺(tái)以及可視化分析支撐服務(wù)的開發(fā)實(shí)現(xiàn);
4、參與大數(shù)據(jù)平臺(tái)各系統(tǒng)的性能分析與系統(tǒng)優(yōu)化,不斷提高系統(tǒng)運(yùn)行效率;
5、完成領(lǐng)導(dǎo)交辦的其他任務(wù)。
任職資格:
1、熟悉JAVA編程,熟悉數(shù)據(jù)庫(kù)編程,熟悉Hadoop及生態(tài)圈的相關(guān)技術(shù),熟練掌握M/R、Spark、Storm等技術(shù)框架的編程;
2、熟悉Hive、ZooKeeper、Spark、ELK等開源項(xiàng)目,有實(shí)際開發(fā)和使用經(jīng)驗(yàn)具備系統(tǒng)優(yōu)化與性能調(diào)優(yōu)能力;
3、熟悉Linux/Unix環(huán)境的基本操作,熟悉一種或多種腳本語(yǔ)言(Shell/scala/Python等);
4、具有較強(qiáng)的邏輯分析能力,高度的責(zé)任心及團(tuán)隊(duì)合作精神;
6、具有基于ambari的大數(shù)據(jù)管理平臺(tái)實(shí)際開發(fā)經(jīng)驗(yàn)者優(yōu)先考慮。