崗位職責(zé):
1、參與據(jù)倉庫的長期架構(gòu)規(guī)劃,與數(shù)據(jù)開發(fā),建設(shè)共享大數(shù)據(jù)平臺(tái);
2、負(fù)責(zé)數(shù)據(jù)平臺(tái)相關(guān)數(shù)據(jù)管理工作,如研發(fā)規(guī)范、質(zhì)量規(guī)范、保障規(guī)范的制定與推動(dòng)實(shí)施落地;
3、負(fù)責(zé)來自業(yè)務(wù)團(tuán)隊(duì)數(shù)據(jù)需求的研發(fā)支撐;
4、大規(guī)模數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)算法的實(shí)現(xiàn)和維護(hù);
5、在線和離線海量數(shù)據(jù)分析平臺(tái)的開發(fā);
6、負(fù)責(zé)數(shù)據(jù)倉庫的建設(shè)和維護(hù),包括需求調(diào)研分析、軟件規(guī)劃、概念模型、設(shè)計(jì)邏輯、物理模型、數(shù)據(jù)處理(抽取、清洗、轉(zhuǎn)化)、項(xiàng)目實(shí)施管控等;
7、負(fù)責(zé)制定數(shù)據(jù)接入和采集規(guī)范制定。
任職要求:
1、從事數(shù)據(jù)倉庫領(lǐng)域工作2年以上;
2、熟悉數(shù)據(jù)建模、ETL設(shè)計(jì)與應(yīng)用、報(bào)表開發(fā)等,并有實(shí)際模型設(shè)計(jì)及ETL開發(fā)經(jīng)驗(yàn)?;具有良好的編程習(xí)慣和文檔編寫習(xí)慣;?
3、熟悉數(shù)據(jù)倉庫領(lǐng)域知識(shí)和管理技能,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、性能調(diào)優(yōu)等;
4、掌握大型數(shù)據(jù)庫開發(fā)技術(shù),如Oracle、Teradata、DB2、Mysql等等掌握至少其中一種,靈活運(yùn)用SQL實(shí)現(xiàn)海量數(shù)據(jù)ETL加工處理;
5、了解大數(shù)據(jù)基礎(chǔ)架構(gòu)和平臺(tái)?,具備相關(guān)產(chǎn)品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)項(xiàng)目應(yīng)用研發(fā)經(jīng)驗(yàn),有MapReduce開發(fā)的實(shí)戰(zhàn)經(jīng)驗(yàn)者優(yōu)先考慮;
6、熟悉linux系統(tǒng);
7、熟練掌握python語言;
8、熟悉數(shù)據(jù)可視化的基本方法,有數(shù)據(jù)可視化的開發(fā)經(jīng)驗(yàn)優(yōu)先;?
9、對(duì)數(shù)據(jù)敏感,具有良好的邏輯分析、責(zé)任心強(qiáng)、良好的對(duì)外溝通和團(tuán)隊(duì)協(xié)作能力