崗位職責(zé):
1、負(fù)責(zé)集團(tuán)級(jí)實(shí)時(shí)/離線/調(diào)度等數(shù)據(jù)計(jì)算平臺(tái)建設(shè);
2、負(fù)責(zé)集團(tuán)級(jí)公共基礎(chǔ)數(shù)據(jù)流、公共平臺(tái)的研發(fā);
3、參與海量數(shù)據(jù)處理和高性能分布式計(jì)算的架構(gòu)設(shè)計(jì),負(fù)責(zé)數(shù)據(jù)處理流程的設(shè)計(jì)和代碼開發(fā),撰寫相關(guān)文檔;
4、設(shè)計(jì)及研發(fā)PaaS平臺(tái)的關(guān)鍵組件;
5、負(fù)責(zé)研發(fā)資源調(diào)度框架、數(shù)據(jù)庫(kù)、緩存、存儲(chǔ)、檢索等相關(guān)中間件的二次開發(fā)優(yōu)化工作;
6、參與集群運(yùn)維工作,支持Hadoop集群底座的運(yùn)維故障分析、解決、性能優(yōu)化;
任職要求:
1.本科及以上學(xué)歷,通信/計(jì)算機(jī)等相關(guān)專業(yè)。
2、熟悉大數(shù)據(jù)相關(guān)組件二次開發(fā)、搭建、應(yīng)用、優(yōu)化,如:Hadoop/Spark/Yarn/Hive/Kafka/Hbase/Kerberos/Flink/Mysql等。
3、扎實(shí)的計(jì)算機(jī)基礎(chǔ),掌握常用的數(shù)據(jù)結(jié)構(gòu)及算法,熟練掌握J(rèn)ava/Golang/Scala/Python中的一項(xiàng)或多項(xiàng);
4、愿意承擔(dān)部分運(yùn)維職責(zé),熟悉Apache?Hadoop部署、性能調(diào)優(yōu)。
5、能閱讀/理解Hadoop等相關(guān)開源組件源碼。
6、較強(qiáng)的人際關(guān)系能力,有團(tuán)隊(duì)精神、較強(qiáng)的執(zhí)行與推動(dòng)能力,有一定抗壓力。