崗位職責(zé):1、負(fù)責(zé)公司大數(shù)據(jù)基礎(chǔ)平臺(tái)的規(guī)劃、部署、管理和優(yōu)化,保障平臺(tái)穩(wěn)定可靠高效運(yùn)行;2、負(fù)責(zé)Hadoop、HBase、Hive、Spark、Kafka等集群的維護(hù)、優(yōu)化工作;3、發(fā)現(xiàn)并解決性能瓶頸,支撐業(yè)務(wù)和數(shù)據(jù)量的快速增長(zhǎng);4、負(fù)責(zé)產(chǎn)品從原型設(shè)計(jì)到正式上線(xiàn)整個(gè)過(guò)程當(dāng)中技術(shù)架構(gòu)角度的持續(xù)優(yōu)化;5、開(kāi)發(fā)大數(shù)據(jù)自動(dòng)化運(yùn)維、監(jiān)控、故障處理工具,監(jiān)控所有基礎(chǔ)設(shè)施組件、應(yīng)用程序,提供緊急應(yīng)急措施。任職要求:1、計(jì)算機(jī)軟件或相關(guān)專(zhuān)業(yè),本科及以上學(xué)歷;2、3年以上Hadoop生態(tài)系統(tǒng)維護(hù)經(jīng)驗(yàn);3、熟悉Hadoop、HBase、Kafka、Hive、Spark等組件的工作原理,搭建、調(diào)優(yōu)和維護(hù)過(guò)spark、Hive、Storm、Kafka、Redis等服務(wù);4、熟悉Linux開(kāi)發(fā)環(huán)境,熟練掌握J(rèn)ava/scala/python等任一編程語(yǔ)言,算法基礎(chǔ)扎實(shí),編碼能力優(yōu)秀;5、能夠閱讀開(kāi)源組件源碼,手動(dòng)編譯、安裝過(guò)patch、更改過(guò)組件源碼且應(yīng)用于生產(chǎn)環(huán)境者優(yōu)先;6、熟悉分布式系統(tǒng)設(shè)計(jì)范型,有大規(guī)模系統(tǒng)設(shè)計(jì)和工程實(shí)現(xiàn)者優(yōu)先。