崗位職責:
?1、參與公司用戶行為數(shù)據(jù)的收集和實時計算開發(fā);
?2、根據(jù)業(yè)務需求實現(xiàn)實時和離線數(shù)據(jù)ETL過程;
?3、對外應用系統(tǒng)、數(shù)據(jù)服務接口的開發(fā);
?4、開發(fā)實時數(shù)據(jù)處理、統(tǒng)計功能,支撐上層業(yè)務,如:數(shù)據(jù)監(jiān)控、統(tǒng)計分析、日報展現(xiàn)、業(yè)務方調(diào)用等。
?任職要求:
?1、計算機/軟件工程或相關專業(yè)出身,工作5年以上;
?2、扎實的代碼基礎;擅長java;
?3、熟悉大數(shù)據(jù)的生態(tài)圈和相關組件(hadoop、hive、spark、flink、kafka、hbase等),能夠深了解集群和周邊模塊;
?4、對sparkRDD模型有深刻的理解,能針對線上問題進行調(diào)優(yōu);
?5、有豐富的數(shù)據(jù)倉庫經(jīng)驗,熟悉數(shù)據(jù)倉庫架構和建模理論;
?6、熟悉Mysql,Redis,能夠快速理解業(yè)務模型和數(shù)據(jù)模型;
?7、熟悉Linux環(huán)境及腳本開發(fā)(Python/Perl/Shell等)。