崗位職責(zé):?
1、參與大數(shù)據(jù)基礎(chǔ)架構(gòu)和技術(shù)體系的規(guī)劃建設(shè),包括數(shù)據(jù)采集平臺(tái)、存儲(chǔ)平臺(tái)、實(shí)時(shí)流處理、機(jī)器學(xué)習(xí)等方面工作;
2、對(duì)系統(tǒng)框架相關(guān)技術(shù)和工具進(jìn)行培訓(xùn),指導(dǎo)開發(fā)人員開發(fā),并解決系統(tǒng)開發(fā)、運(yùn)行中出現(xiàn)的各種技術(shù)問(wèn)題;?
3、組織或參與架構(gòu)評(píng)審工作,為項(xiàng)目實(shí)施過(guò)程中的架構(gòu)問(wèn)題提供建議方案,并制定相應(yīng)規(guī)范
4、較好的溝通能力和自我學(xué)習(xí)能力。
任職要求:?
1、有5年及以上的大數(shù)據(jù)架構(gòu)設(shè)計(jì)和開發(fā)經(jīng)驗(yàn);?
2、豐富的開發(fā)實(shí)踐、熱愛技術(shù)、精通數(shù)據(jù)倉(cāng)庫(kù)建模及ETL設(shè)計(jì)開發(fā);有較為系統(tǒng)的海量數(shù)據(jù)性能處理經(jīng)驗(yàn);?
3、熟悉整個(gè)大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲(chǔ)、分析挖掘;?
4、對(duì)大數(shù)據(jù)基礎(chǔ)架構(gòu)和平臺(tái)有深刻理解,掌握Hive、Hbase、Spark、Streaming、Storm、Flink、es等至少四種數(shù)據(jù)處理核心組件;?
5、大數(shù)據(jù)企業(yè)從事大數(shù)據(jù)架構(gòu)開發(fā)設(shè)計(jì)者、或有機(jī)器學(xué)習(xí)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先考慮;
6、有中級(jí)或者高級(jí)職稱的優(yōu)先考慮。