(一)崗位描述
1.根據(jù)公司大數(shù)據(jù)規(guī)劃,研究和確定大數(shù)據(jù)系統(tǒng)的技術(shù)選型,構(gòu)建技術(shù)解決方案,完成系統(tǒng)架構(gòu)設(shè)計(jì);負(fù)責(zé)大數(shù)據(jù)平臺(tái)的架構(gòu)設(shè)計(jì)、核心代碼開發(fā)等任務(wù);根據(jù)項(xiàng)目要求編寫相關(guān)技術(shù)文檔。
2.負(fù)責(zé)大數(shù)據(jù)平臺(tái)的架構(gòu)評(píng)審,代碼評(píng)審,上線評(píng)審;參與數(shù)據(jù)應(yīng)用需求、設(shè)計(jì)、審核和評(píng)審。
3.負(fù)責(zé)核心模塊研發(fā),負(fù)責(zé)大數(shù)據(jù)平臺(tái)的搭建,完成系統(tǒng)調(diào)試、集成與實(shí)施。
4.負(fù)責(zé)建立和維護(hù)大數(shù)據(jù)平臺(tái)技術(shù)標(biāo)準(zhǔn)規(guī)范,指導(dǎo)開發(fā)人員編寫代碼。
5.落地大數(shù)據(jù)系統(tǒng)設(shè)計(jì),確保實(shí)現(xiàn)和設(shè)計(jì)一致性,包括:細(xì)化方案,與開發(fā)團(tuán)隊(duì)協(xié)作推進(jìn)詳細(xì)設(shè)計(jì)、開發(fā)及交付等。
6.結(jié)合相關(guān)成果,沉淀大數(shù)據(jù)技術(shù)架構(gòu)形成可復(fù)用解決方案,制定相關(guān)技術(shù)和開發(fā)規(guī)范。
(二)任職要求
1.?計(jì)算機(jī)相關(guān)專業(yè),8年及以上相關(guān)工作經(jīng)驗(yàn),有扎實(shí)的計(jì)算機(jī)理論基礎(chǔ)。
2.?精通Java和Python語言,熟悉Linux/Unix開發(fā)環(huán)境。
3.?熟悉Hadoop生態(tài)圈的相關(guān)組件,深入理解MapReduce,熟練使用Hadoop、Hive、Spark、Flink,并具備3年以上Hadoop/Spark代碼級(jí)的調(diào)優(yōu)經(jīng)驗(yàn)。
4.?熟練使用HBase、Kafka、Clickhouse、ElasticSearch。
5.?熟悉ETL、BI、數(shù)據(jù)分析方法、數(shù)據(jù)挖掘經(jīng)驗(yàn);具備敏銳的技術(shù)嗅覺,熟悉業(yè)界技術(shù)發(fā)展動(dòng)態(tài),熱愛技術(shù)。