日日噜夜夜草|一级黄色录像高清版|调教白富美加勒比久久|亚洲欧洲精品婷婷|日韩综合无码色色|日韩精品一区妖精视频|亚洲无码中文字幕hd|99亚洲思思丝袜|手机看片国产精品大胆亚洲|成人无码视频一区二区在线播放

更新于 9月13日

python爬蟲(chóng)實(shí)習(xí)生

100-200元/天
  • 北京通州區(qū)
  • 本科
  • 實(shí)習(xí)
  • 招1人
  • 6個(gè)月
  • 4天/周

職位描述

實(shí)習(xí)證明Python爬蟲(chóng)開(kāi)發(fā)反爬蟲(chóng)數(shù)據(jù)采集數(shù)據(jù)清洗分布式爬蟲(chóng)HeritrixNutchrequestsWebMagicScrapy
崗位職責(zé):
  1. 數(shù)據(jù)爬取: 編寫(xiě)高效的Python爬蟲(chóng)腳本,從指定的公開(kāi)網(wǎng)站、API接口、氣象數(shù)據(jù)平臺(tái)、農(nóng)業(yè)政務(wù)網(wǎng)站等渠道,自動(dòng)化抓取多源異構(gòu)數(shù)據(jù)(如氣象數(shù)據(jù)、土壤墑情、遙感影像、作物價(jià)格、病蟲(chóng)害情報(bào)、學(xué)術(shù)論文等);
  2. 數(shù)據(jù)清洗與處理: 對(duì)爬取到的原始數(shù)據(jù)進(jìn)行清洗、去重、格式化、轉(zhuǎn)換和集成,確保數(shù)據(jù)的準(zhǔn)確性和一致性,使其滿足作物模型研究的輸入要求;
  3. 反爬策略應(yīng)對(duì): 研究并實(shí)施合理的策略以應(yīng)對(duì)常見(jiàn)的反爬蟲(chóng)機(jī)制(如IP限制、驗(yàn)證碼、動(dòng)態(tài)加載等),確保數(shù)據(jù)采集任務(wù)的穩(wěn)定運(yùn)行;
  4. 文檔與協(xié)作: 撰寫(xiě)清晰的技術(shù)文檔,記錄爬蟲(chóng)設(shè)計(jì)思路、數(shù)據(jù)源結(jié)構(gòu)和數(shù)據(jù)處理流程,并與研究員保持密切溝通,理解數(shù)據(jù)需求;
  5. 完成領(lǐng)導(dǎo)交辦的其他工作。
任職資格:
1. 2026/2027屆在校本科生或研究生,計(jì)算機(jī)科學(xué)、軟件工程、數(shù)據(jù)科學(xué)、農(nóng)業(yè)信息技術(shù)或相關(guān)專業(yè);
2. 熟練掌握 Python 編程語(yǔ)言,有良好的編碼習(xí)慣;
3. 熟悉常用的網(wǎng)絡(luò)爬蟲(chóng)框架,如 Scrapy、Requests、BeautifulSoup、lxml 等;
4. 了解網(wǎng)頁(yè)前端基礎(chǔ)(HTML, CSS, JavaScript),能分析網(wǎng)頁(yè)結(jié)構(gòu)并提取數(shù)據(jù);
5. 有處理 Ajax動(dòng)態(tài)加載、Selenium 或 Playwright 模擬瀏覽器操作的經(jīng)驗(yàn);
6. 接觸過(guò)數(shù)據(jù)庫(kù)操作(SQL或NoSQL),了解正則表達(dá)式、Pandas 等數(shù)據(jù)處理庫(kù),對(duì)多線程/異步IO爬蟲(chóng)有一定了解,有實(shí)際爬蟲(chóng)項(xiàng)目經(jīng)驗(yàn)(課程設(shè)計(jì)、個(gè)人項(xiàng)目均可),對(duì)農(nóng)業(yè)、氣象、地理或環(huán)境科學(xué)有濃厚興趣;
7. 具備出色的學(xué)習(xí)能力和解決問(wèn)題的能力,面對(duì)技術(shù)挑戰(zhàn)樂(lè)于鉆研,做事細(xì)心嚴(yán)謹(jǐn),對(duì)數(shù)據(jù)質(zhì)量有要求,良好的溝通能力和團(tuán)隊(duì)協(xié)作精神;
8. 服從管理。

工作地點(diǎn)

北京通州區(qū)信創(chuàng)園A區(qū)-6號(hào)樓4層

職位發(fā)布者

王少娜/人事經(jīng)理

昨日活躍
立即溝通
公司Logo北京麥麥趣耕科技有限公司
麥麥科技(以下簡(jiǎn)稱“麥麥”或者“公司”),作為新一代產(chǎn)業(yè)互聯(lián)網(wǎng)消費(fèi)平臺(tái),通過(guò)消費(fèi)互聯(lián)網(wǎng)和產(chǎn)業(yè)互聯(lián)網(wǎng)的結(jié)合,將線下生產(chǎn)與線上消費(fèi)打通,用新一代的互聯(lián)網(wǎng)技術(shù)和物聯(lián)網(wǎng)硬件技術(shù)為消費(fèi)者提供全新的消費(fèi)體驗(yàn),以此帶來(lái)第一產(chǎn)業(yè)的效率和服務(wù)水平的提升??偛课挥诒本?,在荊門(mén)、重慶、成都、南京等地均有分公司。公司創(chuàng)始人均來(lái)自一線產(chǎn)業(yè)和互聯(lián)網(wǎng)公司資深崗位,有豐富的行業(yè)經(jīng)驗(yàn)和資源。目前公司處于快速發(fā)展階段,發(fā)展前景非常寬廣,歡迎有志之士加入。
公司主頁(yè)