大數(shù)據(jù)技能
1.3年以上數(shù)倉開發(fā)經(jīng)驗(yàn),3年以上java/scala開發(fā)經(jīng)驗(yàn);
2.熟悉hadoop生態(tài)相關(guān)技術(shù),如HDFS、MR、Hive、Hbase、Spark、Flink等;
3.有較強(qiáng)的Spark開發(fā)及調(diào)優(yōu)經(jīng)驗(yàn),對Spark原理有一定的了解;
4.熟悉Hive,有較好的SQL性能調(diào)優(yōu)經(jīng)驗(yàn);
5.對Flink原理有一定的了解,有項(xiàng)目開發(fā)和調(diào)優(yōu)經(jīng)驗(yàn)。
6.熟悉常用消息隊(duì)列及調(diào)優(yōu),如Kafka、RocketMQ等;
7.有數(shù)據(jù)湖開發(fā)經(jīng)驗(yàn),如Hudi、Iceberg等;
8.有編寫Shell腳本的能力
圖數(shù)據(jù)庫開發(fā)技能
1.熟悉圖庫nebula應(yīng)用原理,可設(shè)計(jì)高效、可擴(kuò)展的圖數(shù)據(jù)模型(點(diǎn)、邊、標(biāo)簽、屬性)
2.熟練使用nGQL語言,能進(jìn)行復(fù)雜的數(shù)據(jù)查詢、遍歷、聚合和更新操作
3.熟悉java后端開發(fā),能進(jìn)行業(yè)務(wù)代碼開發(fā),提供對圖數(shù)據(jù)的讀寫服務(wù)接口
4.熟悉spark開發(fā)或python語言 或 nebula connector 技術(shù),能對數(shù)據(jù)進(jìn)行采集和處理,將業(yè)務(wù)數(shù)據(jù)從多種數(shù)據(jù)源高效、準(zhǔn)確地導(dǎo)入到nebula
項(xiàng)目經(jīng)驗(yàn)
有追溯類項(xiàng)目經(jīng)驗(yàn)優(yōu)先
形式 獨(dú)立顧問(可開發(fā)票、自備電腦)
價(jià)格 1500元/人天
使用周期 3個(gè)月
學(xué)歷要求 大專及以上
工作年限 5~8年