【職位描述】1、Hadoop大數(shù)據(jù)處理平臺架構(gòu)設(shè)計(jì)及核心模塊的開發(fā)、測試，主導(dǎo)系統(tǒng)模型設(shè)計(jì)，參與原型實(shí)現(xiàn)工作，對質(zhì)量直接負(fù)責(zé)；2、建立開發(fā)和維護(hù)統(tǒng)一的軟件開發(fā)架構(gòu)，搭建維護(hù)hadoop集群并進(jìn)行必要的troubleshooting，保障系統(tǒng)正常運(yùn)行；3、對集群有著深刻的了解，能深入了解hadoop集群及其周邊常用模塊，解決海量數(shù)據(jù)不斷增長面臨的挑戰(zhàn)，利用集群實(shí)現(xiàn)對數(shù)據(jù)的分析和處理；4、能將業(yè)務(wù)的需求形成需求規(guī)格說明書，功能模塊的設(shè)計(jì)；5、分解詳細(xì)的開發(fā)任務(wù)，能配合其他項(xiàng)目制定開發(fā)計(jì)劃、開發(fā)文檔、開發(fā)流程圖；6、負(fù)責(zé)相關(guān)項(xiàng)目實(shí)施的進(jìn)度、能合理的對項(xiàng)目實(shí)施階段性劃分和驗(yàn)收；7、進(jìn)行大數(shù)據(jù)處理技術(shù)攻關(guān),?從事核心架構(gòu)部分代碼的編寫，指導(dǎo)和培訓(xùn)工程師?！救温氁蟆?、大學(xué)本科或以上學(xué)歷，5年以上開發(fā)經(jīng)驗(yàn)，2年以上大型平臺項(xiàng)目開發(fā)經(jīng)驗(yàn)；2、對服務(wù)器集群有較深的認(rèn)識，并有較為豐富的集群開發(fā)經(jīng)驗(yàn)，有高并發(fā)服務(wù)器項(xiàng)目的開發(fā)經(jīng)驗(yàn)；3、熟悉Hadoop體系結(jié)構(gòu)和運(yùn)行監(jiān)控及調(diào)優(yōu)技術(shù)、對Hadoop生態(tài)圈有較全面了解，精通hadoop各個(gè)模塊的功能,同時(shí)具有源碼級開發(fā)經(jīng)驗(yàn)；4、熟悉HDFS/HBase/Hive/MapReduce/Pig/Mahout/Impala等相關(guān)技術(shù),?有?MapReduce?程序的實(shí)戰(zhàn)開發(fā)經(jīng)驗(yàn)，了解hadoop集群的可視化管理；5、熟悉linux環(huán)境和命令，能使用shell腳本和python腳本。熟悉各種Mysql、Nosql（redis,?mongodb,?hbase）、有集群數(shù)據(jù)庫開發(fā)經(jīng)驗(yàn)者優(yōu)先；6、關(guān)注行業(yè)內(nèi)不斷涌現(xiàn)的新技術(shù)，并能夠結(jié)合實(shí)際對系統(tǒng)架構(gòu)及技術(shù)選型提出合理化建議。熱衷于產(chǎn)品研發(fā)和技術(shù)發(fā)展、具有強(qiáng)烈的責(zé)任意識和開放的心態(tài)。