職位描述
工作職責(zé)要求:
1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)基礎(chǔ)架構(gòu)持續(xù)優(yōu)化、可靠性能力建設(shè)、故障應(yīng)急處理以保障平臺(tái)穩(wěn)定運(yùn)行;
2、負(fù)責(zé)數(shù)據(jù)治理、數(shù)字化應(yīng)用對(duì)大數(shù)據(jù)平臺(tái)的需求承接,并形成規(guī)范化、標(biāo)準(zhǔn)化、自動(dòng)化和智能化的能力、工具及流程;
3、參與產(chǎn)品需求討論和技術(shù)方案設(shè)計(jì),參與大數(shù)據(jù)計(jì)算平臺(tái)、任務(wù)調(diào)度平臺(tái)、大數(shù)據(jù)質(zhì)量管理平臺(tái)、資源管理的設(shè)計(jì)與優(yōu)化;
4、與業(yè)務(wù)團(tuán)隊(duì)和其他IT團(tuán)隊(duì)密切合作,了解需求痛點(diǎn)和行業(yè)優(yōu)秀的解決方案,并端到端的實(shí)施解決方案,確保落地與業(yè)務(wù)需求保持一致;
5、參與大數(shù)據(jù)、智能化平臺(tái)前沿性技術(shù)的預(yù)研,解決技術(shù)平臺(tái)建設(shè)中的關(guān)鍵問(wèn)題、技術(shù)疑難問(wèn)題,探索新技術(shù)及AI在平臺(tái)中的應(yīng)用。
任職資格:
1、碩士及以上學(xué)歷,計(jì)算機(jī)等相關(guān)專業(yè);
2、3年以上大型大數(shù)據(jù)平臺(tái)架構(gòu)、研發(fā)和維護(hù)等相關(guān)工作經(jīng)驗(yàn)、精通Hadoop、Starrocks、Flink、Kafka、HDFS、YARN、Hive、OZone等技術(shù),能夠處理負(fù)責(zé)的技術(shù)問(wèn)題;
3、精通Java核心知識(shí)(如多線程、IO等)、熟悉DataOps相關(guān)工具和技術(shù),具備扎實(shí)的計(jì)算機(jī)基礎(chǔ),掌握對(duì)象設(shè)計(jì)模式、數(shù)據(jù)結(jié)構(gòu)、高并發(fā)服務(wù)架構(gòu)原理,有開源項(xiàng)目經(jīng)驗(yàn)或技術(shù)博客分享;
4、精通DolphinScheduler類似的DAG調(diào)度平臺(tái)、DataVines數(shù)據(jù)質(zhì)量平臺(tái)、指標(biāo)平臺(tái)、知識(shí)庫(kù)等平臺(tái)的原理,有相關(guān)開發(fā)經(jīng)驗(yàn)優(yōu)先;
5、善于與業(yè)務(wù)和IT團(tuán)隊(duì)溝通、對(duì)需求抽象為工具能力,具備問(wèn)題定位和處理能力。