工作內(nèi)容:
?1.負(fù)責(zé)產(chǎn)品功能底層大數(shù)據(jù)開發(fā),負(fù)責(zé)大數(shù)據(jù)清洗、存儲(chǔ)、處理、分析等場(chǎng)景的開發(fā);
?2.參與軟件研發(fā)過程中的文檔撰寫;
?3.負(fù)責(zé)和參與公司大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺(tái)的運(yùn)維,保障數(shù)據(jù)平臺(tái)服務(wù)的穩(wěn)定性和可用性;
?4.負(fù)責(zé)和參與數(shù)據(jù)存儲(chǔ)與計(jì)算任務(wù)的精細(xì)化設(shè)計(jì),選型和開發(fā);
?5.根據(jù)公司項(xiàng)目和業(yè)務(wù)發(fā)展特點(diǎn),參與研究相關(guān)大數(shù)據(jù)前沿技術(shù)。
?崗位要求:
?1、三年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗(yàn);
?2、熟練掌握?Scala,Java?至少一種編程語言,并有實(shí)際?Spark?開發(fā)經(jīng)驗(yàn)者優(yōu)先;
?3、熟練使用Hadoop、spark/Flink、kudu、impala、Kafka等大數(shù)據(jù)相關(guān)技術(shù)。
?4、搭建并熟練使用CDH/HDP等大數(shù)據(jù)平臺(tái)
?5、了解KERBEROS、SENTRY、LDAP權(quán)限認(rèn)證的優(yōu)先;
?6、具備較強(qiáng)的邏輯思維能力,能快速分析并解決出現(xiàn)的問題,具有較強(qiáng)的溝通能力;