崗位職責：
?1.負責建設、維護、優(yōu)化基于Hadoop生態(tài)技術的大數(shù)據集群和計算框架；
?2.通過提供平臺化的計算框架，支撐海量數(shù)據分析、數(shù)據挖掘、機器學習工作；
?3.負責海量數(shù)據的加工、處理，支撐數(shù)據采集、加工、建模、分析的全流程業(yè)務；
?4.負責數(shù)據產品設計與開發(fā)；
?5.關注開源技術動態(tài)，結合業(yè)務場景以及不斷規(guī)模增長帶來的技術問題，構造高度穩(wěn)定可用的大數(shù)據業(yè)務系統(tǒng)；
?6.牽頭公司大數(shù)據應用中臺產品的各類開發(fā)工作。
?任職條件：
?1.碩士研究生以上學歷，計算機相關專業(yè)；
?2.有2-3年及以上hadoop生態(tài)相關研發(fā)和優(yōu)化經驗，熟悉hadoop、Hive、Hbase或其他大數(shù)據組件；
?3.了解常用統(tǒng)計分析方法，掌握常用數(shù)據挖掘和機器學習算法優(yōu)先；
?4.能夠獨立編寫perl、shell、python腳本，熟練使用Linux命令；
?5.熟悉Hadoop/Spark/Flink等流/批數(shù)據處理的開發(fā)經驗；
?6.熟悉大數(shù)據相關組件，具備hive-sql，spark-sql使用經驗，有從事分布式數(shù)據開發(fā)與大數(shù)據應用開發(fā)經驗者優(yōu)先；具備Java?開發(fā)經驗者優(yōu)先；
?7.有10億美元互聯(lián)網公司技術類從業(yè)經驗優(yōu)先。
