崗位職責(zé)
1、負責(zé)大數(shù)據(jù)計算平臺構(gòu)建和大數(shù)據(jù)應(yīng)用研發(fā)；2年級以上大數(shù)據(jù)平臺和數(shù)據(jù)倉庫建設(shè)經(jīng)驗，有數(shù)據(jù)治理、數(shù)據(jù)分析、數(shù)據(jù)建模、數(shù)據(jù)倉庫的設(shè)計及實施經(jīng)驗優(yōu)先；
2、負責(zé)IT業(yè)務(wù)體系的數(shù)據(jù)模型建設(shè)，負責(zé)數(shù)據(jù)模型的設(shè)計，ETL的實施，性能優(yōu)化；
3、完成各類系統(tǒng)建設(shè)所需要的離線/實時數(shù)據(jù)清洗、加工、推送；
4、優(yōu)化數(shù)據(jù)接入、數(shù)據(jù)存儲、數(shù)據(jù)計算服務(wù)框架；
5、基于業(yè)務(wù)需求和應(yīng)用場景，設(shè)計和實現(xiàn)公司大數(shù)據(jù)相關(guān)產(chǎn)品等。
任職要求
1、計算機、統(tǒng)計學(xué)類等相關(guān)專業(yè)，大專及以上學(xué)歷,，2年及以上工作經(jīng)驗；
2、熟悉Hadoop、HBase、HIVE,?Spark等大數(shù)據(jù)組件，能夠進行常用的數(shù)據(jù)開發(fā)工作以及MapReduce并行編程框架；
3、精通至少一種編程語言（java、python、scala），熟悉shell，具備mvc、NIO高并發(fā)框架、組件化、服務(wù)化、單元化等架構(gòu)思路；
3、熟練進行Linux系統(tǒng)管理維護、熟悉數(shù)據(jù)倉庫理論和架構(gòu)、數(shù)據(jù)模型建設(shè)，至少2個以上的基于大數(shù)據(jù)平臺的數(shù)倉項目建設(shè)經(jīng)驗；
4、掌握至少一種分布式搜索引擎技術(shù)，如：Elasticsearch、Solr；
5、?熟悉實時數(shù)據(jù)處理相關(guān)技術(shù)組件，如Flume、Kafka、Storm、Flink、Spark等；
6、了解數(shù)據(jù)挖掘開發(fā)工具，如SPSS、SASR；
7、善于業(yè)務(wù)理解，具備快速解決問題的能力，能夠承受工作中的壓力；
8、具有較強的學(xué)習(xí)能力,具備團隊合作精神，與算法、UI、Java工程師協(xié)作完成項目目標。