崗位職責(zé):1.負(fù)責(zé)數(shù)據(jù)的清洗、加工、分類等開發(fā)工作,并能響應(yīng)數(shù)據(jù)分析師對數(shù)據(jù)提取的要求2.從事海量數(shù)據(jù)分析、挖掘相關(guān)工作3.負(fù)責(zé)數(shù)據(jù)相關(guān)平臺的搭建、開發(fā)、維護(hù)、優(yōu)化任職要求:1.計算機相關(guān)專業(yè),本科及以上學(xué)歷,三年以上大數(shù)據(jù)開發(fā)經(jīng)驗2.熟悉hadoop生態(tài)系統(tǒng)內(nèi)常見項目的使用(hdfs、hive、hbase、spark等)3.精通PostgreSQL數(shù)據(jù)庫的安裝、升級、備份、性能優(yōu)化、集群維護(hù)等日常運維技能;?4.熟悉PostgreSQL數(shù)據(jù)庫的事務(wù)處理機制、存儲過程、觸發(fā)器、函數(shù),能夠熟練使用plpgsql操作數(shù)據(jù)庫;?5.熟悉Linux系統(tǒng)的基本操作,熟練書寫Shell腳本;6.精通Python、Java、php至少一種語言,較強的獨立開發(fā)能力7.具有良好的溝通能力、組織能力及團(tuán)隊協(xié)作精神,有較強的分析和解決問題的能力;有海量大數(shù)據(jù)開發(fā)經(jīng)驗者優(yōu)先,熟悉機器學(xué)習(xí)、數(shù)據(jù)挖掘、分布式計算者優(yōu)先