崗位職責(zé):
1、負(fù)責(zé)商業(yè)智能(BI)的大數(shù)據(jù)平臺和存儲平臺的設(shè)計(jì)和搭建工作,對接內(nèi)外部對大數(shù)據(jù)服務(wù)的需求;
2、負(fù)責(zé)建立數(shù)據(jù)模型,對數(shù)據(jù)進(jìn)行采集、清洗、挖掘、優(yōu)化及統(tǒng)計(jì);
3、負(fù)責(zé)數(shù)據(jù)基礎(chǔ)架構(gòu)、ETL系統(tǒng)、調(diào)度系統(tǒng)處理體系的升級和優(yōu)化,提升系統(tǒng)的穩(wěn)定性和效率;
任職要求:
1、大專以上學(xué)歷、有分布式系統(tǒng)、大數(shù)據(jù)相關(guān)工作經(jīng)驗(yàn);
2、擅長hadoop,了解相關(guān)技術(shù)(MapReduce,?Hive,?Spark,?Kafka,?Yarn,?Storm)、具備分布式數(shù)據(jù)存儲與計(jì)算平臺搭建/應(yīng)用開發(fā)/運(yùn)維?相關(guān)實(shí)踐經(jīng)驗(yàn);
3、精通或者熟悉數(shù)據(jù)庫設(shè)計(jì),熟悉Oracle/MySQL/MySQL?集群等數(shù)據(jù)庫,熟悉NoSQL?者更佳;
4、了解數(shù)據(jù)倉庫開發(fā)流程,有數(shù)據(jù)倉庫(DW)/商業(yè)智能(BI)/數(shù)據(jù)統(tǒng)計(jì)/ETL?相關(guān)工作經(jīng)驗(yàn)者優(yōu)先;
5、有日語基礎(chǔ)者優(yōu)先;