崗位職責(zé)要求:
1.??參與產(chǎn)品和項(xiàng)目研發(fā)工作,完成產(chǎn)品大數(shù)據(jù)架構(gòu)和功能開(kāi)發(fā);
2.??搭建和調(diào)優(yōu)大數(shù)據(jù)基礎(chǔ)平臺(tái),包括Hadoop/HBase/Hive/Sqoop/Kafka/Flume/Spark/Storm等大數(shù)據(jù)組件的環(huán)境搭建;
3.??維護(hù)線上系統(tǒng)的穩(wěn)定性、可靠性,通過(guò)分析現(xiàn)象快速定位問(wèn)題,進(jìn)而提出優(yōu)化方案,改進(jìn)要求;
工作經(jīng)驗(yàn)要求:
1.??計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,2年以上大數(shù)據(jù)工作經(jīng)驗(yàn),有扎實(shí)的計(jì)算機(jī)理論基礎(chǔ);
2.??熟練使用MapReduce、Spark提供的API編程;
3.??熟練使用大數(shù)據(jù)的工具平臺(tái),熟悉Hadoop生態(tài)環(huán)境,對(duì)Hadoop、Spark、Storm、HBase、Hive等至少一個(gè)項(xiàng)目有著深入了解;
4.??掌握數(shù)據(jù)分析的基本流程,具備數(shù)據(jù)采集、清洗、分析等環(huán)節(jié)的實(shí)戰(zhàn)經(jīng)驗(yàn);可以進(jìn)行數(shù)據(jù)產(chǎn)品ETL需求的調(diào)研及開(kāi)發(fā);
5.??熟悉ETL任務(wù)調(diào)度及管理;
6.??熟悉Shell命令,進(jìn)行簡(jiǎn)單的Shell編程;熟悉Linux文本處理命令,VI、AWK、Sed等命令;
簡(jiǎn)歷發(fā)送至:liubo@zhong-ying.com;qinhy@zhong-ying.com;fukai@zhong-ying.com