日日噜夜夜草|一级黄色录像高清版|调教白富美加勒比久久|亚洲欧洲精品婷婷|日韩综合无码色色|日韩精品一区妖精视频|亚洲无码中文字幕hd|99亚洲思思丝袜|手机看片国产精品大胆亚洲|成人无码视频一区二区在线播放

更新于 9月10日

采集運(yùn)維人員

7000-10000元
  • 天津河?xùn)|區(qū)
  • 1-3年
  • 大專
  • 全職
  • 招3人

職位描述

數(shù)據(jù)爬蟲計(jì)算機(jī)軟件云計(jì)算/大數(shù)據(jù)互聯(lián)網(wǎng)
  • 必備經(jīng)驗(yàn): 擁有2年以上網(wǎng)絡(luò)爬蟲或數(shù)據(jù)采集相關(guān)開發(fā)經(jīng)驗(yàn)。
  • 編程基礎(chǔ): 精通 Python,熟悉其多線程、異步IO、網(wǎng)絡(luò)編程等特性。具備良好的編程習(xí)慣和扎實(shí)的計(jì)算機(jī)基礎(chǔ)。
  • 爬蟲框架: 精通 Scrapy, Requests, BeautifulSoup, Selenium, Playwright 等至少一種主流爬蟲框架和工具。
  • 數(shù)據(jù)處理: 熟悉網(wǎng)頁解析技術(shù)(XPath, CSS Selector, 正則表達(dá)式),能熟練處理JSON、HTML、XML等格式數(shù)據(jù)。
  • 反爬應(yīng)對(duì): 具備豐富的反爬蟲應(yīng)對(duì)經(jīng)驗(yàn),熟悉代理IP、User-Agent輪換、請(qǐng)求頭定制、Cookie管理等技術(shù)。
  • 數(shù)據(jù)存儲(chǔ): 熟悉至少一種數(shù)據(jù)庫,如 MySQL, MongoDB, Redis,了解其性能優(yōu)化。
  • 系統(tǒng)運(yùn)維: 了解 Linux 常用命令,能進(jìn)行基本的服務(wù)部署、日志分析和故障排查。
加分項(xiàng)(優(yōu)先考慮):
  • 有大規(guī)模、分布式爬蟲系統(tǒng)(基于 Scrapy-Redis, Celery 或自研框架)的開發(fā)和調(diào)優(yōu)經(jīng)驗(yàn)。
  • 熟悉Docker容器化技術(shù),有爬蟲項(xiàng)目容器化部署經(jīng)驗(yàn)。
  • 有驗(yàn)證碼識(shí)別(圖像、滑塊、點(diǎn)選等)技術(shù)實(shí)踐經(jīng)驗(yàn)。
  • 了解消息隊(duì)列(如 Kafka, RabbitMQ)的基本原理和使用。
  • 有App端數(shù)據(jù)采集經(jīng)驗(yàn),熟悉 Charles/Fiddler 抓包、mitmproxy 或 Xposed/frida 等逆向工具。
  • 了解基本的前端知識(shí)(HTML, CSS, JavaScript),能分析前端加密邏輯。
軟技能與素質(zhì):
  • 具備優(yōu)秀的問題分析能力和解決復(fù)雜問題的熱情,喜歡挑戰(zhàn)技術(shù)難題。
  • 具有很強(qiáng)的責(zé)任心、主動(dòng)性和團(tuán)隊(duì)協(xié)作精神。
  • 具備良好的學(xué)習(xí)能力,能快速跟進(jìn)新的技術(shù)和反爬手段。
  • 對(duì)數(shù)據(jù)敏感,有強(qiáng)烈的質(zhì)量意識(shí)和嚴(yán)謹(jǐn)?shù)墓ぷ鲬B(tài)度。

工作地點(diǎn)

天津河?xùn)|區(qū)十一經(jīng)路

職位發(fā)布者

陳經(jīng)理/項(xiàng)目經(jīng)理

立即溝通
公司Logo天津德科興業(yè)科技有限公司
天津德科興業(yè)科技有限公司
公司主頁