任職資格:
1、計(jì)算機(jī)及其相關(guān)專業(yè),大專及以上學(xué)歷。兩年以上大數(shù)據(jù)應(yīng)用經(jīng)驗(yàn);
2、具備實(shí)時(shí)處理框架的設(shè)計(jì)和開發(fā)能力,熟練掌握Storm、Spark?streaming等大數(shù)據(jù)實(shí)時(shí)處理框架中的一種;
3、熟悉Spark?、R、Hadoop、Hbase、Hive、Elastic?Search/Solr等相關(guān)技術(shù);
4、熟悉Scala、熟悉Linux開發(fā)環(huán)境,能進(jìn)行shell腳本的編寫;
5、具有較強(qiáng)的邏輯分析能力,高度的責(zé)任心及團(tuán)隊(duì)合作精神;
6、具有實(shí)際大數(shù)據(jù)項(xiàng)目的成功經(jīng)驗(yàn)者優(yōu)先考慮。
崗位職責(zé):
1、負(fù)責(zé)異構(gòu)數(shù)據(jù)系統(tǒng)和大數(shù)據(jù)平臺(tái)的集成與融合;
2、負(fù)責(zé)數(shù)據(jù)挖掘算法的設(shè)計(jì)及對(duì)海量數(shù)據(jù)進(jìn)行挖掘分析;
3、負(fù)責(zé)分布式數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)、海量數(shù)據(jù)批處理平臺(tái)、實(shí)時(shí)數(shù)據(jù)處理平臺(tái)等系統(tǒng)開發(fā);
4、參與海量數(shù)據(jù)處理,業(yè)務(wù)數(shù)據(jù)體系的設(shè)計(jì)、數(shù)據(jù)統(tǒng)計(jì)、分析及數(shù)據(jù)建模;
5、參與數(shù)據(jù)平臺(tái)各系統(tǒng)的性能分析與系統(tǒng)優(yōu)化,不斷提高系統(tǒng)運(yùn)行效率;
6、完成領(lǐng)導(dǎo)交辦的其他任務(wù)。