崗位職責(zé):1、負(fù)責(zé)云平臺(tái)海量數(shù)據(jù)的數(shù)據(jù)采集、存儲(chǔ)以及數(shù)據(jù)分析2、負(fù)責(zé)大數(shù)據(jù)系統(tǒng)的業(yè)務(wù)開發(fā)、迭代、優(yōu)化和維護(hù)工作3、負(fù)責(zé)實(shí)時(shí)數(shù)據(jù)和離線數(shù)據(jù)的加工分析、統(tǒng)計(jì)報(bào)表、以及可視化。任職要求:1、本科及以上學(xué)歷,精通java編程,有1年以上數(shù)據(jù)相關(guān)工作經(jīng)驗(yàn)2、熟悉linux?或macOS開發(fā)環(huán)境,熟悉linux系統(tǒng)基本操作,會(huì)編寫shell或python腳本。3、熟悉數(shù)據(jù)批處理框架hadoop,對(duì)hdfs,YARN,MapReduce相關(guān)原理有一定了解。4、熟悉spark,對(duì)spark?streaming流處理框架以及Storm有一定了解。5、熟悉大數(shù)據(jù)存儲(chǔ)相關(guān)數(shù)據(jù)庫MongoDB、Cassandra、hbase至少一種;了解elasticsearch全文檢索引擎的優(yōu)先考慮。6、熟悉Redis,或Memcached分布式緩存數(shù)據(jù)庫至少一種。7、熟悉rabbitmq或kafka或activemq至少一種消息隊(duì)列優(yōu)先考慮。8、熟練使用git,有docker容器使用經(jīng)驗(yàn)優(yōu)先考慮。9、熟悉spring?boot框架的優(yōu)先考慮。10、熟悉前端web編程,能勝任可視化前端系統(tǒng)的優(yōu)先考慮。