雇員點(diǎn)評(píng)標(biāo)簽
職位描述
Java爬蟲(chóng)開(kāi)發(fā)KafkaFlinkHadoopSparkSeleniumjsoupHttpClient計(jì)算機(jī)軟件互聯(lián)網(wǎng)
計(jì)算機(jī)或相關(guān)專(zhuān)業(yè)5到10年Java開(kāi)發(fā)經(jīng)驗(yàn)，1年以上專(zhuān)職爬蟲(chóng)開(kāi)發(fā)經(jīng)驗(yàn)。
精通 Java，具有良好的編程習(xí)慣和扎實(shí)的數(shù)據(jù)結(jié)構(gòu)、算法基礎(chǔ)。
熟練掌握主流爬蟲(chóng)框架，如 selenium、Jsoup、HttpClient 等，
熟悉網(wǎng)絡(luò)協(xié)議（HTTP/HTTPS/WebSocket），深刻理解請(qǐng)求、響應(yīng)、會(huì)話、Cookie等機(jī)制。
具備較強(qiáng)的反反爬蟲(chóng)能力，有處理驗(yàn)證碼（OCR、打碼平臺(tái)）、代理IP池、User-Agent池等實(shí)戰(zhàn)經(jīng)驗(yàn)。
熟悉至少一種主流數(shù)據(jù)庫(kù)（MySQL、PostgreSQL）和一種NoSQL數(shù)據(jù)庫(kù)（Redis、Elasticsearch）。
具備良好的問(wèn)題分析、解決能力和團(tuán)隊(duì)合作精神。
優(yōu)先考慮：
有分布式爬蟲(chóng)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)，熟悉相關(guān)技術(shù)（Kafka分布式隊(duì)列）。
有基于無(wú)頭瀏覽器（Headless Chrome）的爬蟲(chóng)項(xiàng)目經(jīng)驗(yàn)。
熟悉 Web逆向，能分析并破解JavaScript加密算法，使用工具（如Charles、Fiddler、Wireshark）抓包分析。
有爬蟲(chóng)平臺(tái)化、可視化配置和管理經(jīng)驗(yàn)者優(yōu)先。
精通 Java，具有良好的編程習(xí)慣和扎實(shí)的數(shù)據(jù)結(jié)構(gòu)、算法基礎(chǔ)。
熟練掌握主流爬蟲(chóng)框架，如 selenium、Jsoup、HttpClient 等，
熟悉網(wǎng)絡(luò)協(xié)議（HTTP/HTTPS/WebSocket），深刻理解請(qǐng)求、響應(yīng)、會(huì)話、Cookie等機(jī)制。
具備較強(qiáng)的反反爬蟲(chóng)能力，有處理驗(yàn)證碼（OCR、打碼平臺(tái)）、代理IP池、User-Agent池等實(shí)戰(zhàn)經(jīng)驗(yàn)。
熟悉至少一種主流數(shù)據(jù)庫(kù)（MySQL、PostgreSQL）和一種NoSQL數(shù)據(jù)庫(kù)（Redis、Elasticsearch）。
具備良好的問(wèn)題分析、解決能力和團(tuán)隊(duì)合作精神。
優(yōu)先考慮：
有分布式爬蟲(chóng)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)，熟悉相關(guān)技術(shù)（Kafka分布式隊(duì)列）。
有基于無(wú)頭瀏覽器（Headless Chrome）的爬蟲(chóng)項(xiàng)目經(jīng)驗(yàn)。
熟悉 Web逆向，能分析并破解JavaScript加密算法，使用工具（如Charles、Fiddler、Wireshark）抓包分析。
有爬蟲(chóng)平臺(tái)化、可視化配置和管理經(jīng)驗(yàn)者優(yōu)先。
工作地點(diǎn)
上海嘉定區(qū)智能網(wǎng)聯(lián)新能源汽車(chē)創(chuàng)新孵化中心于田南路36號(hào)
相似職位
- 爬蟲(chóng)開(kāi)發(fā)（數(shù)據(jù)采集方向）1.1-1.3萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - 爬蟲(chóng)中級(jí)工程師（外包庫(kù)帕思）1.1-1.6萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - python爬蟲(chóng)工程師1.3-1.5萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 上海 - 徐匯
深圳市法本信息技術(shù)股份有限公司- 爬蟲(chóng)1.5-1.8萬(wàn)
上海 - 徐匯
湖南珊瑚信息技術(shù)有限公司 - 爬蟲(chóng)工程師1.2-1.3萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
劉丹/人事經(jīng)理
剛剛活躍立即溝通
中電金信軟件有限公司
中電金信，是中國(guó)電子旗下成員企業(yè)，通過(guò)持續(xù)研發(fā)創(chuàng)新，參與國(guó)家重大工程，依托行業(yè)場(chǎng)景，構(gòu)建金融級(jí)數(shù)字底座，打造全棧全域解決方案，提供領(lǐng)先的咨詢(xún)、軟件產(chǎn)品及開(kāi)發(fā)、質(zhì)量安全保障及運(yùn)營(yíng)服務(wù)，為金融及重點(diǎn)行業(yè)數(shù)智化轉(zhuǎn)型及安全發(fā)展提供強(qiáng)大動(dòng)能，并以中國(guó)數(shù)智化轉(zhuǎn)型最佳實(shí)踐服務(wù)全球。我們推崇開(kāi)放包容的文化。在中電金信，你將和同樣擁有熱情和夢(mèng)想的優(yōu)秀隊(duì)友一起合作、交流和學(xué)習(xí)，穩(wěn)扎穩(wěn)打不斷提升，和團(tuán)隊(duì)一起助力國(guó)家重大工程項(xiàng)目。我們?yōu)槟闾峁┣逦穆殬I(yè)路徑和不設(shè)限的發(fā)展機(jī)會(huì)，你將通過(guò)不同類(lèi)型的項(xiàng)目不斷成長(zhǎng)，獲得前所未有的榮耀感和使命感，和我們一起去創(chuàng)造數(shù)字時(shí)代的美好未來(lái)。
公司主頁(yè)