崗位職責(zé):
1、負責(zé)大數(shù)據(jù)項目的設(shè)計與規(guī)劃,根據(jù)項目需求構(gòu)建大數(shù)據(jù)存儲、計算、分析模型。
2、負責(zé)異構(gòu)數(shù)據(jù)系統(tǒng)的集成。
3、負責(zé)Hadoop、HBase、Hive、spark、ES等開源組件的部署及性能優(yōu)化。
4、負責(zé)基于Hadoop、spark等開源大數(shù)據(jù)組件進行項目核心代碼的編寫。
5、完成領(lǐng)導(dǎo)交辦的其它工作。
任職要求:
1、計算機或相關(guān)專業(yè)本科及以上學(xué)歷,5年以上大數(shù)據(jù)開發(fā)相關(guān)經(jīng)驗。
2、精通數(shù)據(jù)結(jié)構(gòu),多線程,高并發(fā),掌握常用的設(shè)計模式和算法。
3、精通Java、python、scala、shell等一種或多種開發(fā)語言。
4、精通Hadoop相關(guān)組件的功能,對Hive、HBase、Spark、Kafka生態(tài)系統(tǒng)等有深入了解。
5、熟練使用MySQL,SQLServer,Oracle等常用數(shù)據(jù)庫,獨立完成數(shù)據(jù)庫表設(shè)計,海量數(shù)據(jù)處理并對其進行優(yōu)化。
6、熟練掌握常見的中間件(Redis,MQ系列,Kafka),分布式解決方案及其原理。
7、熟練Linux環(huán)境和命令。
8、邏輯思維能力強,抗壓能力強,有良好的表達、溝通能力,踏實肯干,責(zé)任心強,具有獨立解決問題和團隊管理能力。
9、有智慧校園項目經(jīng)歷者優(yōu)先考慮。