主要職責:
1、負責大數(shù)據(jù)平臺的架構(gòu)設(shè)計工作,包括系統(tǒng)的總體規(guī)劃、架構(gòu)設(shè)計、系統(tǒng)分析、軟件實現(xiàn)、大數(shù)據(jù)產(chǎn)品集成等;?
2、深度參與大數(shù)據(jù)平臺的設(shè)計與實施,提供大數(shù)據(jù)處理和分析應(yīng)用平臺的設(shè)計指導(dǎo),提供有前瞻性的大數(shù)據(jù)基礎(chǔ)架構(gòu)解決方案;?
3、負責大數(shù)據(jù)項目的實施管理,包括項目計劃管理、實施過程管理、團隊管理等,及客戶溝通。
能力要求:
1、有豐富的大數(shù)據(jù)系統(tǒng)設(shè)計和研發(fā)經(jīng)驗;?
2、有多年大數(shù)據(jù)項目設(shè)計、實施、以項目管理經(jīng)驗,有良好的團隊合作精神和較強溝通協(xié)調(diào)能力;?
3、深刻理解大數(shù)據(jù)處理(分布式計算、內(nèi)存計算、流計算、圖數(shù)據(jù)庫、大規(guī)模并行處理數(shù)據(jù)庫等)相關(guān)技術(shù)和實現(xiàn)方法,有架構(gòu)和設(shè)計實踐經(jīng)驗;?
4、精通Hadoop、Spark、YARN,MapReduce,Impala,F(xiàn)lume,Kafaka等大數(shù)據(jù)平臺和開源軟件,有實際項目架構(gòu)經(jīng)驗;?
5、對關(guān)系型與非關(guān)系型數(shù)據(jù)庫與數(shù)據(jù)存儲均具有非常深刻的理解,能夠熟練使用常用數(shù)據(jù)庫,并理解不同數(shù)據(jù)庫產(chǎn)品的特性區(qū)別,包括但不限于:HDFS/HBase/Mongo/Redis/MySQL。