主要職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的架構(gòu)設(shè)計(jì)工作,包括系統(tǒng)的總體規(guī)劃、架構(gòu)設(shè)計(jì)、系統(tǒng)分析、軟件實(shí)現(xiàn)、大數(shù)據(jù)產(chǎn)品集成等;?
2、深度參與大數(shù)據(jù)平臺(tái)的設(shè)計(jì)與實(shí)施,提供大數(shù)據(jù)處理和分析應(yīng)用平臺(tái)的設(shè)計(jì)指導(dǎo),提供有前瞻性的大數(shù)據(jù)基礎(chǔ)架構(gòu)解決方案;?
3、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目的實(shí)施管理,包括項(xiàng)目計(jì)劃管理、實(shí)施過程管理、團(tuán)隊(duì)管理等,及客戶溝通。
能力要求:
1、有豐富的大數(shù)據(jù)系統(tǒng)設(shè)計(jì)和研發(fā)經(jīng)驗(yàn);?
2、有多年大數(shù)據(jù)項(xiàng)目設(shè)計(jì)、實(shí)施、以項(xiàng)目管理經(jīng)驗(yàn),有良好的團(tuán)隊(duì)合作精神和較強(qiáng)溝通協(xié)調(diào)能力;?
3、深刻理解大數(shù)據(jù)處理(分布式計(jì)算、內(nèi)存計(jì)算、流計(jì)算、圖數(shù)據(jù)庫、大規(guī)模并行處理數(shù)據(jù)庫等)相關(guān)技術(shù)和實(shí)現(xiàn)方法,有架構(gòu)和設(shè)計(jì)實(shí)踐經(jīng)驗(yàn);?
4、精通Hadoop、Spark、YARN,MapReduce,Impala,F(xiàn)lume,Kafaka等大數(shù)據(jù)平臺(tái)和開源軟件,有實(shí)際項(xiàng)目架構(gòu)經(jīng)驗(yàn);?
5、對(duì)關(guān)系型與非關(guān)系型數(shù)據(jù)庫與數(shù)據(jù)存儲(chǔ)均具有非常深刻的理解,能夠熟練使用常用數(shù)據(jù)庫,并理解不同數(shù)據(jù)庫產(chǎn)品的特性區(qū)別,包括但不限于:HDFS/HBase/Mongo/Redis/MySQL。