崗位職責:1.?負責設計，開發(fā)，管理大數(shù)據(jù)平臺。2.?負責基于Hadoop，Spark等技術實時離線對數(shù)據(jù)進行抽取、清洗、轉化。3.?負責基于Hbase，Hive框架處理各類業(yè)務統(tǒng)計，輸出報表。4.?負責基于Flume，Kafka平臺進行數(shù)據(jù)采集分發(fā)。任職要求：1、?計算機、統(tǒng)計學、數(shù)學或相關專業(yè)畢業(yè)，本科以上學歷，五年以上工作經(jīng)驗，兩年以上大數(shù)據(jù)開發(fā)經(jīng)驗；2、?具有交通海量數(shù)據(jù)挖掘、分析相關項目實施的工作經(jīng)驗優(yōu)先；3、?熟悉大數(shù)據(jù)平臺Hadoop、Hive部署及調優(yōu)，具備一定架構能力；4、?熟悉Flume、Spark、Kafka、ES等主流大數(shù)據(jù)開源技術的原理，并有一定的使用經(jīng)驗；5、?對關系型數(shù)據(jù)庫能夠熟練操作，數(shù)據(jù)庫設計、管理與優(yōu)化，熟練MySQL主從調優(yōu)，集群架構；6、?具備良好的邏輯分析能力、組織溝通能力，富有創(chuàng)新精神，充滿激情，樂于接受挑戰(zhàn)。7、?有較強的邏輯思維能力、責任心強、團隊協(xié)作意識強，良好的溝通能力與表達能力，能承擔工作壓力，主動性強，富有創(chuàng)新精神，充滿激情，樂于接受挑戰(zhàn)；????????????????????????????8、?因公司項目需要，能接受適量出差。