雇員點(diǎn)評(píng)標(biāo)簽
職位描述
SparkFlink
1、熟悉主流大數(shù)據(jù)平臺(tái)：如 Hadoop（包括 HDFS、YARN）、Spark、Flink 等。要了解它們的架構(gòu)、原理和組件，能夠熟練進(jìn)行安裝、配置和升級(jí)。例如，需要知道如何在集群環(huán)境中部署 Hadoop，以及如何根據(jù)業(yè)務(wù)需求調(diào)整 Hadoop 集群的參數(shù)。
掌握數(shù)據(jù)存儲(chǔ)系統(tǒng)：包括 HBase、Cassandra 等分布式數(shù)據(jù)庫(kù)。要理解它們的數(shù)據(jù)模型、存儲(chǔ)機(jī)制和讀寫操作，能夠進(jìn)行性能優(yōu)化。例如，對(duì)于 HBase，要能夠優(yōu)化其表結(jié)構(gòu)設(shè)計(jì)以提高數(shù)據(jù)讀寫效率。
2、精通 Linux 系統(tǒng)：因?yàn)榇髷?shù)據(jù)平臺(tái)大多運(yùn)行在 Linux 環(huán)境下。需要熟練掌握 Linux 命令行操作，如文件系統(tǒng)管理、用戶管理、進(jìn)程管理等。例如，能夠使用命令行工具查找和解決服務(wù)器上的高負(fù)載進(jìn)程問題。
3、服務(wù)器硬件知識(shí)：了解服務(wù)器的硬件組成，如 CPU、內(nèi)存、存儲(chǔ)設(shè)備等。能夠根據(jù)大數(shù)據(jù)系統(tǒng)的負(fù)載要求合理配置服務(wù)器資源，并且在出現(xiàn)硬件故障時(shí)能夠進(jìn)行初步的診斷和處理。
網(wǎng)絡(luò)知識(shí)
4、自動(dòng)化運(yùn)維工具：熟練使用 Ansible、Puppet、SaltStack 等工具進(jìn)行大數(shù)據(jù)平臺(tái)的自動(dòng)化部署和配置管理。例如，使用 Ansible 編寫自動(dòng)化腳本，實(shí)現(xiàn)一鍵部署大數(shù)據(jù)集群。
腳本語(yǔ)言能力：至少精通一種腳本語(yǔ)言，如 Python、Shell 等。能夠編寫腳本來實(shí)現(xiàn)系統(tǒng)監(jiān)控、日志分析、故障自動(dòng)恢復(fù)等功能。例如，使用 Python 編寫腳本定期收集和分析大數(shù)據(jù)系統(tǒng)的性能指標(biāo)。
5、有大數(shù)據(jù)平臺(tái)運(yùn)維經(jīng)驗(yàn)：一般要求有 1 - 3 年以上大數(shù)據(jù)運(yùn)維項(xiàng)目經(jīng)驗(yàn)，參與過大型大數(shù)據(jù)平臺(tái)的建設(shè)和維護(hù)工作。例如，曾經(jīng)負(fù)責(zé)過一個(gè)電商企業(yè)的大數(shù)據(jù)分析平臺(tái)的日常運(yùn)維工作，包括數(shù)據(jù)采集、存儲(chǔ)和分析系統(tǒng)的維護(hù)。
6、具備故障排查能力：能夠快速定位和解決大數(shù)據(jù)系統(tǒng)在運(yùn)行過程中出現(xiàn)的各種故障，如集群節(jié)點(diǎn)故障、數(shù)據(jù)丟失、服務(wù)異常等。例如，在遇到數(shù)據(jù)倉(cāng)庫(kù)查詢性能急劇下降的情況時(shí)，能夠通過分析查詢計(jì)劃、系統(tǒng)資源使用等方面找到原因并解決問題。
工作地點(diǎn)
西安雁塔區(qū)環(huán)普科技產(chǎn)業(yè)園-E座
相似職位
- 大數(shù)據(jù)開發(fā)工程師1.2-2萬
西安 - 雁塔
陜西省通信服務(wù)有限公司 - 大數(shù)據(jù)開發(fā)工程師1-1.5萬
西安 - 雁塔
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - data engineer+英語(yǔ)流利溝通1.5-2.2萬
西安 - 雁塔
上海欽誠(chéng)信息科技有限公司 - 數(shù)據(jù)開發(fā)工程師1-1.6萬
西安 - 雁塔
普聯(lián)軟件股份有限公司 - 大數(shù)據(jù)開發(fā)工程師9000-12000元
西安 - 雁塔
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - 大數(shù)據(jù)開發(fā)1-1.5萬
西安 - 灞橋
深圳市法本信息技術(shù)股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
劉宇潔/人事經(jīng)理
三日內(nèi)活躍立即溝通
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司
軟通動(dòng)力信息技術(shù)（集團(tuán)）股份有限公司（以下簡(jiǎn)稱“軟通動(dòng)力”）是中國(guó)數(shù)字技術(shù)產(chǎn)品和服務(wù)創(chuàng)新領(lǐng)導(dǎo)企業(yè)，致力于成為一家具有全球影響力的科技企業(yè)，企業(yè)數(shù)字化轉(zhuǎn)型可信賴合作伙伴。公司2005年成立于北京，多年來始終堅(jiān)持科技創(chuàng)新，具有軟硬全棧的智能技術(shù)產(chǎn)品和服務(wù)能力，提供軟件與數(shù)字技術(shù)服務(wù)、計(jì)算產(chǎn)品與數(shù)字基礎(chǔ)設(shè)施、數(shù)字能源與智算服務(wù)以及國(guó)際化服務(wù)。目前，公司在10余個(gè)重要行業(yè)服務(wù)超過1100家國(guó)內(nèi)外客戶，其中超過230家客戶為世界500強(qiáng)或中國(guó)500強(qiáng)企業(yè)，員工近90000人。軟通動(dòng)力擁有軟通咨詢、軟通金科、軟通工業(yè)互聯(lián)、機(jī)械革命、軟通華方等業(yè)務(wù)子品牌，并在全球40余個(gè)城市布局業(yè)務(wù)，構(gòu)建北美、日本、東南亞、中東四大國(guó)際交付中心，在北京城市副中心、江蘇無錫建設(shè)兩大智能制造基地。同時(shí)，公司前瞻布局智能制造、ICT軟硬基礎(chǔ)能力和生產(chǎn)力智能化產(chǎn)品，打造產(chǎn)業(yè)鏈閉環(huán)。軟通動(dòng)力設(shè)立30個(gè)能力中心，擁有1個(gè)國(guó)家級(jí)工程實(shí)驗(yàn)室，6個(gè)省市政府認(rèn)定的工程、技術(shù)實(shí)驗(yàn)室及研發(fā)中心，1個(gè)博士后科研工作站，50+技術(shù)合作伙伴的生態(tài)合作體系，不斷探索前沿技術(shù)的巨大商業(yè)應(yīng)用潛力。公司旗下教育品牌軟通教育，擁有一家全日制本科學(xué)院——鄭州西亞斯學(xué)院數(shù)字技術(shù)產(chǎn)業(yè)學(xué)院；同時(shí)在全國(guó)合作院校600多所，設(shè)有70多個(gè)校企聯(lián)合人才培養(yǎng)基地，通過校企合作、協(xié)同育人，為社會(huì)培養(yǎng)高素質(zhì)應(yīng)用型人才。軟通動(dòng)力先后獲得“2023年中國(guó)IT服務(wù)市場(chǎng)排名TOP 1”、“2024年Q4 PC出貨量國(guó)內(nèi)市場(chǎng)份額排名TOP 2”、“2024年中國(guó)軟件和信息技術(shù)服務(wù)競(jìng)爭(zhēng)力百?gòu)?qiáng)企業(yè)”、“2023年中國(guó)信創(chuàng)企業(yè)100強(qiáng)”、“2024萬得ESG評(píng)級(jí)（Wind ESG Rating）AA級(jí)及信息技術(shù)服務(wù)行業(yè)ESG綜合得分排名第一”等榮譽(yù)及市場(chǎng)認(rèn)可，并擁有全球軟件工程領(lǐng)域最高級(jí)別CMMI V2.0成熟度5級(jí)評(píng)估認(rèn)證、國(guó)家研發(fā)運(yùn)營(yíng)一體化（DevOps）三級(jí)能力成熟度模型認(rèn)證、信息技術(shù)服務(wù)標(biāo)準(zhǔn)（ITSS）運(yùn)維能力成熟度一級(jí)認(rèn)證等專業(yè)資質(zhì)，支撐公司更優(yōu)質(zhì)的服務(wù)體系。
公司主頁(yè)