工作職責(zé)·
l?負(fù)責(zé)大數(shù)據(jù)平臺的性能調(diào)優(yōu),控制架構(gòu)質(zhì)量,解決項目技術(shù)難題;
l?對研發(fā)項目和任務(wù)需求進(jìn)行評估和方案設(shè)計、配合Leader完成開發(fā)工作。
l?實現(xiàn)大數(shù)據(jù)平臺開發(fā)、多業(yè)務(wù)系統(tǒng)數(shù)據(jù)接入、數(shù)據(jù)挖掘分析及數(shù)據(jù)可視化的架構(gòu)設(shè)計與能力,支持解決方案實施。
l?完成技術(shù)驗證,核心技術(shù)攻關(guān),解決開發(fā)過程中技術(shù)難題。
l?研究大數(shù)據(jù)和算法前沿技術(shù),對大數(shù)據(jù)算法平臺迭代式進(jìn)行分析及優(yōu)化,不斷提升算法平臺的架構(gòu)、性能、數(shù)據(jù)處理,以及其上的算法開發(fā)的能力。
任職資格說明·
l?具有3年及以上大數(shù)據(jù)架構(gòu)設(shè)計和開發(fā)經(jīng)驗;溝通能力強;本科及以上學(xué)歷。
l?熟悉整個大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲、分析挖據(jù)、數(shù)據(jù)可視化;
l?熟悉Hadoop相關(guān)各種開源項目,掌握Hive、Spark、Streaming、Kafka、impala、kudu等數(shù)據(jù)處理核心組件;對HDFS、M/R、Yarn的原理有深入了解,掌握系統(tǒng)優(yōu)化方法。
l?熟悉Java/Python/Scala等一種或多種語言,熟悉Linux平臺。
l?具有銀行、金融領(lǐng)域相關(guān)大數(shù)據(jù)系統(tǒng)構(gòu)建經(jīng)驗者優(yōu)先。