崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)項(xiàng)目開發(fā),使用大數(shù)據(jù)組件進(jìn)行開發(fā)、部署與代碼優(yōu)化;
2、設(shè)計(jì)與管理數(shù)據(jù)倉(cāng)庫(kù),并根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)查詢分析與可視化;
3、理解業(yè)務(wù)流程,對(duì)關(guān)鍵商業(yè)指標(biāo)進(jìn)行計(jì)算,對(duì)業(yè)務(wù)數(shù)據(jù)進(jìn)行探索分析;
4、使用機(jī)器學(xué)習(xí)算法進(jìn)行數(shù)據(jù)建模,提升商家數(shù)據(jù)決策能力。
?
崗位要求:
1、本科及以上學(xué)歷,數(shù)理相關(guān)專業(yè),三年或以上數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
2、熟練掌握Python語(yǔ)言開發(fā),熟悉Pandas,PySpark,Scikit-learn,Scipy,Statsmodels等多個(gè)數(shù)據(jù)分析庫(kù);
3、熟練SQL語(yǔ)法和MySql等關(guān)系型數(shù)據(jù)庫(kù)使用,熟悉Redis等鍵值數(shù)據(jù)庫(kù);
4、熟練使用多種大數(shù)據(jù)組件,包括但不限于Hive,HBase,Spark,ClickHouse,Kafka等;
5、了解數(shù)據(jù)倉(cāng)庫(kù)建模理論、模型設(shè)計(jì)、ETL設(shè)計(jì)思路,具備OLAP查詢相關(guān)經(jīng)驗(yàn)。
以下為加分項(xiàng):
1、有機(jī)器學(xué)習(xí)算法項(xiàng)目(分類聚類、協(xié)同過(guò)濾、文本挖掘、時(shí)間序列預(yù)測(cè)等)經(jīng)驗(yàn),
???熟悉一種或多種機(jī)器學(xué)習(xí)工具(SparkML,Scikit-learn,TensorFlow,Pytorch)優(yōu)先;
2、有后端接口開發(fā)經(jīng)驗(yàn)、對(duì)接口設(shè)計(jì)、GRPC通訊協(xié)議有一定理解;
3、有數(shù)據(jù)倉(cāng)庫(kù)建模經(jīng)驗(yàn),對(duì)零售等業(yè)態(tài)數(shù)據(jù)倉(cāng)庫(kù)有一定理解,或有電商BI背景優(yōu)先;
4、有推薦系統(tǒng)、用戶畫像、多維分析報(bào)表等開發(fā)經(jīng)驗(yàn)優(yōu)先;
5、有Docker容器化部署,?CDH搭建與維護(hù)經(jīng)驗(yàn)優(yōu)先。