工作內(nèi)容:
1.負(fù)責(zé)大數(shù)據(jù)應(yīng)用的開發(fā)工作,負(fù)責(zé)數(shù)據(jù)平臺搭建與維護(hù),對大數(shù)據(jù)平臺進(jìn)行優(yōu)化和升級,整合多源數(shù)據(jù),包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。
2.開展數(shù)據(jù)處理與分析,運用大數(shù)據(jù)技術(shù),對海量數(shù)據(jù)進(jìn)行清洗、轉(zhuǎn)換、集成等工作。
3.與研發(fā)團(tuán)隊協(xié)作,完成數(shù)據(jù)接口定義與聯(lián)調(diào),確保功能高效實現(xiàn)。
4.參與大數(shù)據(jù)相關(guān)方案選型、代碼評審,推動技術(shù)文檔沉淀與知識共享。
5.跟進(jìn)大數(shù)據(jù)新技術(shù)趨勢,引入新技術(shù)優(yōu)化現(xiàn)有系統(tǒng)。
基本條件
1.計算機(jī)科學(xué)與技術(shù)、軟件工程、數(shù)據(jù)科學(xué)等相關(guān)專業(yè),本科及以上學(xué)歷。具備扎實的計算機(jī)基礎(chǔ)知識,包括數(shù)據(jù)結(jié)構(gòu)、算法、操作系統(tǒng)等;
2.具有3年及以上通信項目開發(fā)經(jīng)驗,具備通信系統(tǒng)、車聯(lián)網(wǎng)或相關(guān)領(lǐng)域項目經(jīng)驗。
能力要求
1.精通至少一種大數(shù)據(jù)開發(fā)框架,如 Hadoop、Spark,熟悉其生態(tài)組件(Hive、HBase、Flume、Kafka 等)。
2.掌握大數(shù)據(jù)分析工具,如 SQL、NoSQL 數(shù)據(jù)庫,具備數(shù)據(jù)建模和優(yōu)化查詢的能力。了解機(jī)器學(xué)習(xí)基礎(chǔ)知識,對數(shù)據(jù)挖掘算法有一定了解。
3.具備分布式事務(wù)處理能力,熟悉微服務(wù)架構(gòu),了解 Docker、Kubernetes 等容器化技術(shù)。
4.有智慧樓宇、車聯(lián)網(wǎng)、軟件正版化、國網(wǎng)E行、英大人壽運維等相關(guān)領(lǐng)域開發(fā)經(jīng)驗者優(yōu)先。
5.具備良好的問題分析與解決能力,以及團(tuán)隊協(xié)作和溝通能力。
6.對技術(shù)有熱情,能快速學(xué)習(xí)新技術(shù),適應(yīng)快節(jié)奏的項目開發(fā)。