1.負(fù)責(zé)數(shù)據(jù)相關(guān)平臺(tái)的搭建、開發(fā)、維護(hù)、優(yōu)化(Hadoop/Spark/Hive/Hbase);
?
2.根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)模型的調(diào)研、設(shè)計(jì)、開發(fā)及驗(yàn)證工作,并持續(xù)進(jìn)行模型的優(yōu)化;
?
3.負(fù)責(zé)數(shù)據(jù)模型架構(gòu)的構(gòu)建,建立數(shù)據(jù)采集抽取、清洗、校驗(yàn)等數(shù)據(jù)加工流程規(guī)范及OLAP多維數(shù)據(jù)分析模型;
?
4.持續(xù)對(duì)系統(tǒng)的技術(shù)架構(gòu)進(jìn)行改進(jìn)和優(yōu)化,提升海量數(shù)據(jù)的查詢性能和用戶體驗(yàn)。
任職資格
?
1.熟悉數(shù)據(jù)管理標(biāo)準(zhǔn)、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理;
?
2.2年以上基于Hadoop架構(gòu)DW/BI項(xiàng)目實(shí)施和開發(fā)經(jīng)驗(yàn);熟悉hadoop生態(tài)圈,包括但不限于hive、hdfs、hbase、sqoop、spark、scala?等;
?
3.熟悉Mysql、Gbase等主流數(shù)據(jù)倉庫的技術(shù)細(xì)節(jié);?
?
4.能熟練進(jìn)行SQL查詢優(yōu)化、有海量數(shù)據(jù)處理經(jīng)驗(yàn);
?
熟練使用Unix/Linux操作系統(tǒng),熟悉常用的Shell/Python/Perl工具;
?
5.具有良好的溝通能力、組織能力及團(tuán)隊(duì)協(xié)作精神,有較強(qiáng)的分析和解決問題的能力。