任職要求:??
??1、?熟悉Hadoop相關技術,包括Mapreduce,Hive,Hbase,Impala,?Spark,flink,?kafka等;?
??2、?熟悉java?web開發(fā),理解I/O和多線程,熟悉netty開發(fā)框架并具有相關項目經(jīng)驗。熟悉至少一種緩存使用redis等。熟悉多線程、高并發(fā)等分布式應用場景。?
??3、?具有優(yōu)秀的開發(fā)規(guī)范意識,對大數(shù)據(jù)技術和開發(fā)有熱情,工作認真負責,有較強的學習能力和團隊合作意識;?
??4,具備CDH項目使用經(jīng)驗,安裝部署及運維經(jīng)驗優(yōu)先。
??專業(yè)技能:
??1.JAVA基礎扎實,包括JVM、I0、多線程、并發(fā)、網(wǎng)絡等;深刻理解面向?qū)ο?,熟悉各種設計模式?
??2.熟練使用常用的JAVA技術框架,并對他們有深入的應用,掌握它的原理和機制,如Spring、Springboot、Mybatis等?
??3.有豐富的分布式開發(fā)經(jīng)驗,精通微服務架構相關技術以及常用開源框架,如:Dubbo、RocketMQ、Redis、Zookeeper、Spring?Cloud等,?能對分布式常用技術進行合理應用,解決問題?
??4.精通Hadoop大數(shù)據(jù)平臺框架,精通HDFS系統(tǒng)原理,熟練Flink、Spark、Hive、HBase、Impala等組件的應用;?
??5.熟悉關系型數(shù)據(jù)庫(Oracle\Mysql\Postgresql),可熟練編寫SQL語句及存儲過程,了解SQL性能調(diào)優(yōu);
?????崗位職責:??
?????1.基于業(yè)界常用的大數(shù)據(jù)相關開源組件,包括調(diào)度、計算、存儲、查詢等,構建云原生的大數(shù)據(jù)平臺。??
?????2.提供統(tǒng)一的異構數(shù)據(jù)源接入集成,數(shù)據(jù)離線、實時計算,元數(shù)據(jù)管理和數(shù)據(jù)服務等全鏈路智能數(shù)據(jù)構建與管理的大數(shù)據(jù)能力,服務于公司內(nèi)部業(yè)務。??
?????3.持續(xù)對大數(shù)據(jù)系統(tǒng)技術架構進行優(yōu)化,降低成本,提升系統(tǒng)的性能和用戶體驗,打造面向未來的批流一體的計算和存儲,提升團隊技術影響力。