職位描述
數(shù)據(jù)庫(kù)開(kāi)發(fā)數(shù)據(jù)中臺(tái)開(kāi)發(fā)JavaHadoopFlinkKafka
崗位職責(zé):
1.設(shè)計(jì)并實(shí)施大數(shù)據(jù)處理和分析策略，確保數(shù)據(jù)質(zhì)量和精準(zhǔn)度。
2.與團(tuán)隊(duì)合作,優(yōu)化數(shù)據(jù)處理流程,提高數(shù)據(jù)效率。
3.參與大數(shù)據(jù)項(xiàng)目的規(guī)劃和執(zhí)行，協(xié)助解決技術(shù)難題。
4.與架構(gòu)師對(duì)齊長(zhǎng)期目標(biāo)，作為技術(shù)中堅(jiān)，負(fù)責(zé)設(shè)計(jì)實(shí)時(shí)數(shù)倉(cāng)及離線數(shù)倉(cāng)
5.主導(dǎo)數(shù)據(jù)清洗、轉(zhuǎn)換、加載流程，使用Flink構(gòu)建高效作業(yè)，優(yōu)化資源分配
任職要求:
1.具備扎實(shí)的大數(shù)據(jù)處理和分析能力，熟悉數(shù)據(jù)處理工具和語(yǔ)言。
2.具有良好的問(wèn)題解決能力，能夠獨(dú)立處理和解決技術(shù)問(wèn)題。
3.具備扎實(shí)的java功底及SQL編寫能力
4.精通FLINK實(shí)時(shí)離線數(shù)據(jù)處理方式
5.加分項(xiàng)：了解數(shù)據(jù)湖或OLAP引擎
3.技術(shù)棧
①精通Java編程語(yǔ)言
①精通SQL編程語(yǔ)言
②大數(shù)據(jù)工具鏈：Spark/Hadoop/Kafka/Hive等,熟悉數(shù)據(jù)湖(Paimon/Delta/Iceberg)
4.開(kāi)發(fā)能力
①設(shè)計(jì)ETL流程(如Kafka→Flink→Hive)
②SQL優(yōu)化(復(fù)雜查詢調(diào)優(yōu)，Hive/Presto等)
③Flink作業(yè)優(yōu)化(數(shù)據(jù)傾斜處理、資源分配)，熟悉實(shí)時(shí)離線狀態(tài)操作
熟悉離線實(shí)時(shí)數(shù)倉(cāng)基本架構(gòu)
5.數(shù)據(jù)經(jīng)驗(yàn)
①大規(guī)模數(shù)據(jù)處理：參與TB-PB級(jí)項(xiàng)目（如日志清洗、用戶行為分析）
②數(shù)據(jù)質(zhì)量保障：設(shè)計(jì)校驗(yàn)規(guī)則、處理臟數(shù)據(jù)
③主導(dǎo)過(guò)千萬(wàn)級(jí)DAU用戶數(shù)據(jù)處理
1.設(shè)計(jì)并實(shí)施大數(shù)據(jù)處理和分析策略，確保數(shù)據(jù)質(zhì)量和精準(zhǔn)度。
2.與團(tuán)隊(duì)合作,優(yōu)化數(shù)據(jù)處理流程,提高數(shù)據(jù)效率。
3.參與大數(shù)據(jù)項(xiàng)目的規(guī)劃和執(zhí)行，協(xié)助解決技術(shù)難題。
4.與架構(gòu)師對(duì)齊長(zhǎng)期目標(biāo)，作為技術(shù)中堅(jiān)，負(fù)責(zé)設(shè)計(jì)實(shí)時(shí)數(shù)倉(cāng)及離線數(shù)倉(cāng)
5.主導(dǎo)數(shù)據(jù)清洗、轉(zhuǎn)換、加載流程，使用Flink構(gòu)建高效作業(yè)，優(yōu)化資源分配
任職要求:
1.具備扎實(shí)的大數(shù)據(jù)處理和分析能力，熟悉數(shù)據(jù)處理工具和語(yǔ)言。
2.具有良好的問(wèn)題解決能力，能夠獨(dú)立處理和解決技術(shù)問(wèn)題。
3.具備扎實(shí)的java功底及SQL編寫能力
4.精通FLINK實(shí)時(shí)離線數(shù)據(jù)處理方式
5.加分項(xiàng)：了解數(shù)據(jù)湖或OLAP引擎
3.技術(shù)棧
①精通Java編程語(yǔ)言
①精通SQL編程語(yǔ)言
②大數(shù)據(jù)工具鏈：Spark/Hadoop/Kafka/Hive等,熟悉數(shù)據(jù)湖(Paimon/Delta/Iceberg)
4.開(kāi)發(fā)能力
①設(shè)計(jì)ETL流程(如Kafka→Flink→Hive)
②SQL優(yōu)化(復(fù)雜查詢調(diào)優(yōu)，Hive/Presto等)
③Flink作業(yè)優(yōu)化(數(shù)據(jù)傾斜處理、資源分配)，熟悉實(shí)時(shí)離線狀態(tài)操作
熟悉離線實(shí)時(shí)數(shù)倉(cāng)基本架構(gòu)
5.數(shù)據(jù)經(jīng)驗(yàn)
①大規(guī)模數(shù)據(jù)處理：參與TB-PB級(jí)項(xiàng)目（如日志清洗、用戶行為分析）
②數(shù)據(jù)質(zhì)量保障：設(shè)計(jì)校驗(yàn)規(guī)則、處理臟數(shù)據(jù)
③主導(dǎo)過(guò)千萬(wàn)級(jí)DAU用戶數(shù)據(jù)處理
工作地點(diǎn)
武進(jìn)區(qū)常州科教城創(chuàng)研港-1號(hào)樓14樓
相似職位
常州 - 新北
星宇股份- 大數(shù)據(jù)工程師(J10023)1.5-2.5萬(wàn)
常州 - 武進(jìn)
開(kāi)邁斯新能源科技有限公司 - 大數(shù)據(jù)開(kāi)發(fā)工程師9000-13000元
常州 - 武進(jìn)
立華股份 - 大數(shù)據(jù)開(kāi)發(fā)工程師1.3-1.8萬(wàn)
常州 - 武進(jìn)
蘇文電能科技股份有限公司 - 數(shù)據(jù)運(yùn)維工程師7000-8000元
常州 - 武進(jìn)
曠達(dá)汽車飾件系統(tǒng)有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
王女士/招聘專員
三日內(nèi)活躍立即溝通
蘇文電能科技股份有限公司蘇文電能，成立于 2007年 4月，注冊(cè)資本 10523.87萬(wàn)元，是集設(shè)計(jì)咨詢（E）、設(shè)備服務(wù)（P）、安裝建設(shè)（C）以及智能運(yùn)維（O）為一體的國(guó)家級(jí)高新技術(shù)企業(yè)，為用戶提供一站式（EPCO）供用電服務(wù)，讓用電更安全，更省心！蘇文電能具備電力工程建設(shè)全過(guò)程技術(shù)咨詢資質(zhì)；新能源發(fā)電、送電工程、變電工程、建筑智能化設(shè)計(jì)資質(zhì);電力工程總承包資質(zhì);承裝(修、試)電力設(shè)施許可證和安全生產(chǎn)許可證;通過(guò)了中電聯(lián) ISO9001質(zhì)量管理體系認(rèn)證、ISO14001環(huán)境管理體系認(rèn)證及 OHSAS18001職業(yè)健康安全管理體系認(rèn)證，是國(guó)家級(jí)“守合同重信用”企業(yè);智能化變電站監(jiān)管數(shù)據(jù)中心系統(tǒng)名列國(guó)家工信部電力需求側(cè)管理系統(tǒng)名錄，江蘇省企業(yè)技術(shù)中心，江蘇省工程技術(shù)研究中心。蘇文電能擁有 10多年的實(shí)戰(zhàn)積累，服務(wù)了上千個(gè)工業(yè)企業(yè)、商業(yè)綜合體、高保障用電(數(shù)據(jù)中心,公共設(shè)施、地鐵)、電網(wǎng)建設(shè)、居配等項(xiàng)目的咨詢、設(shè)計(jì)、設(shè)備、施工、管理和運(yùn)維。電能，成立于 2007年 4月，注冊(cè)資本 10523.87萬(wàn)元，是集設(shè)計(jì)咨詢（E）、設(shè)備服務(wù)（P）、安裝建設(shè)（C）以及智能運(yùn)維（O）為一體的國(guó)家級(jí)高新技術(shù)企業(yè)，為用戶提供一站式（EPCO）供用電服務(wù)，讓用電更安全，更省心！蘇文電能具備電力工程建設(shè)全過(guò)程技術(shù)咨詢資質(zhì)；新能源發(fā)電、送電工程、變電工程、建筑智能化設(shè)計(jì)資質(zhì);電力工程總承包資質(zhì);承裝(修、試)電力設(shè)施許可證和安全生產(chǎn)許可證;通過(guò)了中電聯(lián) ISO9001質(zhì)量管理體系認(rèn)證、ISO14001環(huán)境管理體系認(rèn)證及 OHSAS18001職業(yè)健康安全管理體系認(rèn)證，是國(guó)家級(jí)“守合同重信用”企業(yè);智能化變電站監(jiān)管數(shù)據(jù)中心系統(tǒng)名列國(guó)家工信部電力需求側(cè)管理系統(tǒng)名錄，江蘇省企業(yè)技術(shù)中心，江蘇省工程技術(shù)研究中心。蘇文電能擁有 10多年的實(shí)戰(zhàn)積累，服務(wù)了上千個(gè)工業(yè)企業(yè)、商業(yè)綜合體、高保障用電(數(shù)據(jù)中心,公共設(shè)施、地鐵)、電網(wǎng)建設(shè)、居配等項(xiàng)目的咨詢、設(shè)計(jì)、設(shè)備、施工、管理和運(yùn)維。
公司主頁(yè)