崗位職責:
1、負責移動大數(shù)據(jù)平臺的基礎(chǔ)技術(shù)規(guī)劃,平臺的建設(shè),包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作;
2、負責大數(shù)據(jù)平臺的數(shù)據(jù)采集、處理、存儲的架構(gòu)實現(xiàn)以及大數(shù)據(jù)開發(fā)團隊業(yè)務(wù)需求開發(fā);
3、負責數(shù)據(jù)倉庫、數(shù)據(jù)集市的數(shù)據(jù)模型設(shè)計;
4、負責移動大數(shù)據(jù)平臺與產(chǎn)品和相關(guān)技術(shù)的研究;
5、負責核心技術(shù)問題公關(guān),建設(shè)高可靠性、擴展性及高性能大數(shù)據(jù)/數(shù)據(jù)應(yīng)用平臺;
6、參與數(shù)據(jù)倉庫ETL規(guī)則設(shè)計和開發(fā)?;
7、參與數(shù)據(jù)倉庫需求調(diào)研和需求分析?;
8、參與業(yè)務(wù)需求調(diào)研,根據(jù)需求設(shè)計大數(shù)據(jù)解決方案并跟進具體實施項目;
9、研究和分享大數(shù)據(jù)架構(gòu)領(lǐng)域新技術(shù);
崗位要求:
1、本科或以上學歷優(yōu)先,計算機相關(guān)專業(yè),2年以上大數(shù)據(jù)架構(gòu)設(shè)計經(jīng)驗,具備大型數(shù)據(jù)利用的生產(chǎn)實戰(zhàn)經(jīng)驗;
2、熟悉大數(shù)據(jù)解決方案包括Hadoop、Spark、Hive,?Hbase,?SQL-on-Hadoop等大數(shù)據(jù)解決方案;
3、精通常用消息中間件的使用,例如kafka/RocketMQ/Apache?Pulsar,有解讀相關(guān)源碼者優(yōu)先;
4、深刻理解大數(shù)據(jù)處理等相關(guān)技術(shù)和實現(xiàn)方法,有架構(gòu)和設(shè)計實踐經(jīng)驗;
5、熟悉至少一種常用數(shù)據(jù)庫語言(Oracle/MySQL/PG等);
6、精通Java、Scala、Python、R中的一種或多種語言;
7、對數(shù)據(jù)敏感,有數(shù)據(jù)分析、數(shù)據(jù)挖掘經(jīng)驗者優(yōu)先;
8、有大型數(shù)據(jù)倉庫實施、大數(shù)據(jù)平臺數(shù)據(jù)開發(fā)經(jīng)驗者優(yōu)先。