數(shù)據(jù)開發(fā)崗位職責:
1)按照要求對上游數(shù)據(jù)進行ETL處理,抽取到大數(shù)據(jù)平臺部的數(shù)據(jù)倉庫中;
2)根據(jù)業(yè)務需求進行報表開發(fā),包括后臺數(shù)據(jù)庫表的邏輯層處理以及前臺報表頁面的開發(fā),保證高質(zhì)量、高效的交付;
3)根據(jù)業(yè)務需求進行BI報表開發(fā),處理寬表邏輯和BI前臺頁面的實現(xiàn),保證高質(zhì)量、高效的交付;
4)節(jié)假日與其他同事輪流值班,保證數(shù)據(jù)庫的正常跑批;
5)參與數(shù)據(jù)倉庫的優(yōu)化設(shè)計,如元數(shù)據(jù)、數(shù)據(jù)權(quán)限、調(diào)度優(yōu)化;
6)數(shù)據(jù)質(zhì)量稽核、問題分析及處理,優(yōu)化數(shù)據(jù)處理程序;
7)協(xié)助架構(gòu)師完成數(shù)據(jù)倉庫相關(guān)的設(shè)計與開發(fā);
8)協(xié)助業(yè)務部門抓取、分析數(shù)據(jù);
9)參與Hadoop集群的搭建與維護
技能要求:大數(shù)據(jù)倉庫、Hadoop架構(gòu)、CDH集群、hive、spark、BI系統(tǒng),3年以上大數(shù)據(jù)倉庫開發(fā)經(jīng)驗