技能及項(xiàng)目經(jīng)驗(yàn)需求:
?1,8年以上大數(shù)據(jù)相關(guān)項(xiàng)目經(jīng)驗(yàn);
?2,熟悉微軟Azure上的數(shù)據(jù)相關(guān)租金,包括但不限于:Azure?Data?lake?,Azure?Data?Factory,Azure?Databricks,Azure?SQL?DB;
?擁有文件,API,?DB?等類別數(shù)據(jù)的ETL?經(jīng)驗(yàn),對Azure的權(quán)限與安全有深刻認(rèn)識,精通數(shù)據(jù)邏輯及物理分層模型;
?3,精通SQL?及?Procedure編寫;
?4,熟悉Databricks開發(fā),具備Python或Scala編程能力,包括Dataframe,文件輸入輸出等數(shù)據(jù)處理編程,對大數(shù)據(jù)處理的性能優(yōu)化具備實(shí)踐經(jīng)驗(yàn),具有機(jī)器學(xué)習(xí)經(jīng)驗(yàn)更佳;
?5,熟悉微軟C#編程技術(shù),包括WEB網(wǎng)站/Portal,緩存技術(shù),了解網(wǎng)站性能調(diào)優(yōu)。掌握Azure身份認(rèn)證授權(quán)體系;
?6,具備數(shù)據(jù)治理相關(guān)經(jīng)驗(yàn)和知識,了解數(shù)據(jù)目錄,數(shù)據(jù)質(zhì)量,數(shù)據(jù)血緣等的實(shí)施;
?7,了解微軟Power?Bi及相關(guān)體系,包括但不限于:Power?Bi開發(fā),OLAP及SSAS表格模型等;
?8,熟悉Agile/Scrum項(xiàng)目管理方法,使用過Azure?DevOps工具進(jìn)行項(xiàng)目實(shí)施,包括CI/CD等;
?9,熟悉ERwin建模工具及應(yīng)用過Data?Vault建模方法更佳;