崗位職責(zé):
1、負責(zé)平臺的整體數(shù)據(jù)架構(gòu)設(shè)計,完成從業(yè)務(wù)模型到數(shù)據(jù)模型的設(shè)計工作?,熟悉業(yè)務(wù)模型分析及轉(zhuǎn)換,具備較強的業(yè)務(wù)理解和業(yè)務(wù)抽象能力,善于從復(fù)雜現(xiàn)象中抽象根本問題,分析根本原因,并形成最合適的快速解決方案
2、完成各種面向業(yè)務(wù)目標的數(shù)據(jù)分析模型的定義和應(yīng)用開發(fā),熟悉常用的分析、統(tǒng)計、建模方法,熟悉數(shù)據(jù)倉庫相關(guān)技術(shù),如?ETL、報表開發(fā),熟悉分布式計算的設(shè)計,了解在工程化過程中會遇到的各種問題。
3、熟悉Hadoop,Hive等系統(tǒng)并有過實戰(zhàn)經(jīng)驗優(yōu)先。
4、負責(zé)數(shù)據(jù)收集、加工、清洗以及平臺數(shù)據(jù)提取、數(shù)據(jù)挖掘及數(shù)據(jù)分析,具有良好的商業(yè)敏感度和優(yōu)秀的數(shù)據(jù)分析技能,能夠解決復(fù)雜的商業(yè)問題.
5、在平臺運行的過程中校正整體的架構(gòu)設(shè)計,以及詳細模塊拆分設(shè)計;撰寫思路清晰的系統(tǒng)架構(gòu)文檔,以及對應(yīng)實施的技術(shù)文檔;
6、負責(zé)數(shù)據(jù)平臺團隊管理,進行團隊技術(shù)的培訓(xùn)
能力要求:
1、本科或以上學(xué)歷,計算機科學(xué)技術(shù)相關(guān)專業(yè),具備扎實數(shù)學(xué)基礎(chǔ),五年或以上相關(guān)工作經(jīng)驗;
2、精通數(shù)據(jù)平臺架構(gòu)設(shè)計,熟悉該領(lǐng)域內(nèi)分布式計算理論/數(shù)據(jù)庫模型/系統(tǒng)模型知識原理。在Linux熟練的使用shell進行腳本編程;
3、熟悉BI套件Pentaho者優(yōu)先;
4、對Hadoop/HBase生態(tài)環(huán)境體系的搭建和管理掌握Flink、Hadoop、HBase、MapReduce、HDFS、Hive、Pig、Sqoop、Oozie、Flume、Zookeeper等開源項目的原理和使用方法使用者優(yōu)先
5、具有數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫設(shè)計以及程序設(shè)計、開發(fā)經(jīng)驗;數(shù)據(jù)解決方案或數(shù)據(jù)架構(gòu)(數(shù)據(jù)倉庫、數(shù)據(jù)集成、數(shù)據(jù)管理)構(gòu)建經(jīng)驗;
6、具備攻關(guān)能力,有一定的抗壓能力,擁有良好溝通和管理能力。