● 業(yè)務(wù)技能要求:
1、熟悉大數(shù)據(jù)理論知識(shí),熟悉大數(shù)據(jù)ETL的開(kāi)發(fā)流程
2、熟悉計(jì)算機(jī)相關(guān)基礎(chǔ)知識(shí)、了解軟件工程等相關(guān)知識(shí)
2、具備一定的數(shù)據(jù)洞察力、嚴(yán)謹(jǐn)?shù)倪壿嬎季S能力,善于分析、歸納、解決問(wèn)題,了解數(shù)據(jù)分層理論,并能量化數(shù)據(jù)建模。
● 專(zhuān)業(yè)知識(shí)要求:
1、熟悉linux,熟練使用java開(kāi)發(fā)語(yǔ)言;
2、熟悉大數(shù)據(jù)套件,熟悉flink/spark流批引擎的任務(wù)開(kāi)發(fā),熟悉HDFS/對(duì)象存儲(chǔ),熟悉hiveSQL/SparkSQL/FlinkSQL等語(yǔ)法,熟悉kafka/pulsar等消息引擎
3、數(shù)據(jù)大數(shù)據(jù)Hive/Clickhouse/Doris等OLAP分析引擎