崗位職責
1、負責基于Hadoop/Spark平臺架構(gòu)的設(shè)計、開發(fā)；
2、負責大數(shù)據(jù)存儲系統(tǒng)、分布式計算系統(tǒng)、挖掘算法等設(shè)計、研發(fā)以及維護、優(yōu)化工作；
3、負責大數(shù)據(jù)平臺的運維工作，持續(xù)完善大數(shù)據(jù)平臺，保證穩(wěn)定性、安全性。
4、負責多業(yè)務(wù)數(shù)據(jù)倉庫的設(shè)計、構(gòu)建和?ETL?工作；
5、為公司大數(shù)據(jù)分析相關(guān)項目提供技術(shù)解決方案；
6、協(xié)助研發(fā)團隊，規(guī)劃及建設(shè)大數(shù)據(jù)分析平臺；
7、負責對公司相關(guān)人員進行大數(shù)據(jù)相關(guān)知識培訓。
任職資格和要求
1、計算機、統(tǒng)計學等相關(guān)專業(yè)本科及以上學歷，具有深厚的數(shù)學、統(tǒng)計學和計算機相關(guān)知識，精通數(shù)據(jù)倉庫和數(shù)據(jù)挖掘的相關(guān)技術(shù)，3年以上大數(shù)據(jù)開發(fā)相關(guān)經(jīng)驗；
2、具有非常扎實的Java基礎(chǔ)，熟悉Shell、Python、R、Scala等一種以上語言；
3、熟悉大數(shù)據(jù)處理相關(guān)技術(shù)，包括但不限于Hadoop、Hive、Hbase、Impala、Spark，Kafaka、Flume、Sqoop、Storm、Redis、Kylin等，并且有實踐經(jīng)驗，能解決應用中的復雜問題；
4、研讀過Hadoop、Hbase、Hive源代碼者，能夠在特定業(yè)務(wù)中進行定制改造者優(yōu)先；
5、具有海量數(shù)據(jù)處理、數(shù)據(jù)挖掘、數(shù)據(jù)分析相關(guān)項目的工作經(jīng)驗者優(yōu)先；
6、熟悉BI和大數(shù)據(jù)領(lǐng)域的解決方案，具備該領(lǐng)域全面的技術(shù)積累，包括報表平臺，OLAP引擎和DB，ETL，數(shù)據(jù)倉庫建模和設(shè)計，了解海量分布式數(shù)據(jù)處理分析架構(gòu)；
7、喜歡分析數(shù)據(jù)，對數(shù)字有敏感性，工作條理性強，邏輯清晰；
8、良好的溝通協(xié)調(diào)能力，高度的工作責任心，能承受較大的工作壓力。