日日噜夜夜草|一级黄色录像高清版|调教白富美加勒比久久|亚洲欧洲精品婷婷|日韩综合无码色色|日韩精品一区妖精视频|亚洲无码中文字幕hd|99亚洲思思丝袜|手机看片国产精品大胆亚洲|成人无码视频一区二区在线播放

更新于 2025-06-24 01:32:53

爬蟲工程師(雙休)

7000-11000元
  • 鄭州管城回族區(qū)
  • 城東路
  • 1-3年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)挖掘
崗位職責(zé): 1. 負(fù)責(zé)網(wǎng)絡(luò)爬蟲系統(tǒng)平臺(tái)的架構(gòu)設(shè)計(jì)與開發(fā): 設(shè)計(jì)并實(shí)現(xiàn)高效、穩(wěn)定、可擴(kuò)展的爬蟲系統(tǒng)架構(gòu),涵蓋抓取調(diào)度、多樣化抓取、頁(yè)面解析和結(jié)構(gòu)化抽取等核心模塊。 進(jìn)行技術(shù)選型,評(píng)估并選擇合適的開源框架、工具和庫(kù),提升開發(fā)效率和系統(tǒng)性能。 2. 攻克爬蟲技術(shù)難點(diǎn),提升抓取效率和質(zhì)量: 深入研究爬蟲策略和防屏蔽規(guī)則,解決封賬號(hào)、封IP、驗(yàn)證碼、混淆加密、算法還原、so層、頁(yè)面跳轉(zhuǎn)等技術(shù)難題。 開發(fā)高效的反爬蟲機(jī)制,提升網(wǎng)頁(yè)抓取的成功率和數(shù)據(jù)質(zhì)量。 3. 數(shù)據(jù)處理與平臺(tái)優(yōu)化: 對(duì)抓取后的數(shù)據(jù)進(jìn)行清洗、存儲(chǔ)和分析,確保數(shù)據(jù)準(zhǔn)確性和完整性。 持續(xù)優(yōu)化爬蟲平臺(tái),提升系統(tǒng)性能、穩(wěn)定性和可維護(hù)性,滿足不斷變化的爬取業(yè)務(wù)需求。 崗位要求: 1. 技術(shù)基礎(chǔ)扎實(shí): 精通Linux操作系統(tǒng),具備豐富的Python編程經(jīng)驗(yàn),至少熟練掌握Scrapy、BeautifulSoup、Selenium等主流爬蟲框架中的一種。 熟悉各種加密算法,在破解驗(yàn)證碼方面有豐富經(jīng)驗(yàn),能夠獨(dú)立解決JS反爬和模擬登陸問題。 2. 數(shù)據(jù)處理能力強(qiáng): 熟練掌握正則表達(dá)式、XPath、CSS等網(wǎng)頁(yè)信息抽取技術(shù),能夠高效地從網(wǎng)頁(yè)中提取所需數(shù)據(jù)。 熟悉常見反爬機(jī)制,如驗(yàn)證碼識(shí)別、IP代理池、headers認(rèn)證和cookie等。 熟悉數(shù)據(jù)清洗流程,能夠使用numpy、pandas、jieba等工具對(duì)數(shù)據(jù)進(jìn)行處理和分析。 3. 后端開發(fā)經(jīng)驗(yàn): 熟悉Flask、FastAPI等后端框架,能夠開發(fā)和維護(hù)爬蟲系統(tǒng)的后端服務(wù)。 熟悉MySQL、SQLite等數(shù)據(jù)庫(kù),能夠進(jìn)行數(shù)據(jù)庫(kù)設(shè)計(jì)和優(yōu)化。 4. 加分項(xiàng): 有JS逆向相關(guān)項(xiàng)目經(jīng)驗(yàn),能夠分析和破解復(fù)雜的JS加密算法。 有大規(guī)模分布式爬蟲系統(tǒng)開發(fā)經(jīng)驗(yàn),熟悉相關(guān)技術(shù)棧和架構(gòu)設(shè)計(jì)。 對(duì)數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)等領(lǐng)域有濃厚興趣,并具備一定的實(shí)踐經(jīng)驗(yàn)。 5、統(tǒng)招第一學(xué)歷本科及以上,學(xué)信網(wǎng)可查。

工作地點(diǎn)

鄭州管城回族區(qū)正商向陽(yáng)廣場(chǎng)-B座15A

職位發(fā)布者

李佳佳/人事經(jīng)理

昨日活躍
立即溝通
公司Logo建基工程咨詢有限公司
建基工程咨詢有限公司的過去、今天和未來公司從1998年12月專注建設(shè)監(jiān)理領(lǐng)域,專業(yè)從事工程監(jiān)理、招標(biāo)代理、造價(jià)咨詢的監(jiān)理公司。擁有35年的工程管理經(jīng)驗(yàn),25年的工程咨詢團(tuán)隊(duì),20年的品牌鑄造,發(fā)展幾十年來,共完成8060多個(gè)工程建設(shè)工程咨詢服務(wù),工程總投資約千億元人民幣,公司所監(jiān)理的工程曾多次獲得河南省“中州杯”工程及地、市級(jí)優(yōu)良工程獎(jiǎng)。公司被授予“河南監(jiān)理行業(yè)骨干企業(yè)”、“全國(guó)監(jiān)理行業(yè)百?gòu)?qiáng)企業(yè)”、“河南省工程監(jiān)理企業(yè)二十強(qiáng)”、“河南省先進(jìn)監(jiān)理企業(yè)”等榮譽(yù)稱號(hào)。是河南省建設(shè)監(jiān)理協(xié)會(huì)副會(huì)長(zhǎng)單位,河南省產(chǎn)業(yè)發(fā)展研究會(huì)常務(wù)理事單位。公司經(jīng)營(yíng)范圍:建設(shè)工程監(jiān)理、建設(shè)工程招標(biāo)代理、建設(shè)工程造價(jià)咨詢、建設(shè)工程項(xiàng)目管理、建設(shè)工程技術(shù)咨詢服務(wù)。公司資質(zhì):工程監(jiān)理綜合資質(zhì)(可以承接住建部全部14個(gè)大類的所有工程項(xiàng)目,包括房屋建筑工程、市政公用工程、機(jī)電安裝工程、航天航空工程、鐵路工程、公路工程、電力工程、通信工程、冶煉工程、礦山工程、化工石油工程、水利水電工程、農(nóng)林工程、港口與航道工程);招標(biāo)代理乙級(jí)、水利工程施工監(jiān)理乙級(jí)、人防工程監(jiān)理乙級(jí)。通過 ISO9001:2015質(zhì)量管理體系認(rèn)證;IS014001:2015環(huán)境管理體系;OHSAS 18001:2007職業(yè)健康安全管理體系。人才儲(chǔ)備:優(yōu)秀的專業(yè)團(tuán)隊(duì)是公司的寶貴財(cái)富,公司擁有不同領(lǐng)域的專業(yè)人士。公司現(xiàn)有員工2200人。其中:國(guó)家注冊(cè)監(jiān)理工程師127人;國(guó)家一級(jí)注冊(cè)結(jié)構(gòu)工程師3人;其它國(guó)家注冊(cè)工程師25人;國(guó)家注冊(cè)規(guī)劃師5人;國(guó)家一級(jí)注冊(cè)建造師25人,國(guó)家注冊(cè)造價(jià)師8人,省部級(jí)專業(yè)監(jiān)理工程師766人;高級(jí)技術(shù)職稱68人,中級(jí)技術(shù)職稱560人,初級(jí)技術(shù)職稱680人,專業(yè)齊全、結(jié)構(gòu)合理,是一支技術(shù)種類齊全,訓(xùn)練有素、值得信賴的工程建設(shè)咨詢服務(wù)隊(duì)伍。公司配備有微機(jī)和成套的檢測(cè)儀器,為獨(dú)立、公正、科學(xué)地開展建設(shè)監(jiān)理工作創(chuàng)造了良好的條件。后盾支持:公司依托河南省土木建筑學(xué)會(huì)及河南省豫建設(shè)計(jì)院龐大堅(jiān)強(qiáng)有力的專家團(tuán)隊(duì),從而使公司獲得更加強(qiáng)大的技術(shù)支撐,省土木建筑學(xué)會(huì)、豫建設(shè)計(jì)院是集建筑、結(jié)構(gòu)、巖土、材料、檢測(cè)、施工、管理和機(jī)械等技術(shù)于一體的綜合性科技學(xué)術(shù)研究、設(shè)計(jì)、技術(shù)開發(fā)機(jī)構(gòu),在省內(nèi)具有良好的聲譽(yù)和廣泛的社會(huì)知名度。省土木建筑學(xué)會(huì)、豫建設(shè)計(jì)院擁有的各方面的科技和工作成果以及常設(shè)的專家咨詢組,為公司實(shí)施項(xiàng)目管理提供了豐富的知識(shí)儲(chǔ)備和強(qiáng)有力的技術(shù)支持。常設(shè)的專家咨詢組的人員均具有豐富的實(shí)踐經(jīng)驗(yàn),承擔(dān)過許多大中型工程的設(shè)計(jì)和管理工作。其優(yōu)秀、厚重的專業(yè)素質(zhì),嚴(yán)謹(jǐn)科學(xué)的工作態(tài)度,嚴(yán)格的質(zhì)量技術(shù)把關(guān)的工作作風(fēng),對(duì)重大技術(shù)問題科學(xué)求實(shí)的論證,為我公司開展咨詢服務(wù)提供了可靠技術(shù)保障;使得我公司為顧客提供廣泛的增值服務(wù),奠定了強(qiáng)有力咨詢服務(wù)能力和可靠地業(yè)務(wù)技術(shù)水準(zhǔn)。企業(yè)文化:建基管理一貫秉承“嚴(yán)謹(jǐn)、和諧、敬業(yè)、自強(qiáng)”的企業(yè)發(fā)展精神;貫徹“熱情服務(wù),規(guī)范管理,鋪墊建設(shè)工程管理之基石;強(qiáng)化過程,再造精品,攀登建設(shè)咨詢服務(wù)之巔峰”;以人為本,預(yù)防為主,確保職業(yè)健康安全之屏障;誠(chéng)信守法,持續(xù)改進(jìn),營(yíng)造和諧關(guān)愛綠色之環(huán)境“的企業(yè)方針;追求”守法誠(chéng)信合同履約率100%,項(xiàng)目實(shí)體質(zhì)量合格率100%,客戶服務(wù)質(zhì)量滿意率98%“的企業(yè)質(zhì)量目標(biāo);遵循”守法、誠(chéng)信、公正、科學(xué)“的職業(yè)準(zhǔn)則;打造以監(jiān)理和項(xiàng)目管理為一體的、并以在行業(yè)中具有厚重影響力的、”服務(wù)公信、品牌權(quán)威、企業(yè)馳名“的綜合咨詢專業(yè)性公司,為企業(yè)的戰(zhàn)略發(fā)展方向與愿景;同時(shí),堅(jiān)持品牌發(fā)展戰(zhàn)略,為實(shí)現(xiàn)公司的戰(zhàn)略發(fā)展規(guī)劃和目標(biāo),積極倡導(dǎo)”信譽(yù)第一、品牌至上,以人為本、謀求共贏“的核心價(jià)值理念。公司經(jīng)營(yíng)始終秉承”誠(chéng)信公正,技術(shù)可靠“,以滿足業(yè)主需求;以”關(guān)注需求,真誠(chéng)服務(wù)“,作為技術(shù)支撐的服務(wù)理念;堅(jiān)持”認(rèn)真負(fù)責(zé),嚴(yán)格管理,規(guī)范守約,質(zhì)量第一“,贏得市場(chǎng)認(rèn)可;強(qiáng)調(diào)”不斷創(chuàng)新,勇于開拓“精神;提倡”積極進(jìn)取,精誠(chéng)合作“工作態(tài)度。公司以建設(shè)精英人才團(tuán)隊(duì)為已任,努力營(yíng)造信任、關(guān)愛、尊重、快樂的工作氛圍,營(yíng)造員工在企業(yè)享有溫馨而又放心”家“的感覺,創(chuàng)造向心力的文化氛圍。公司在堅(jiān)持”惟才是用“,充分發(fā)揮個(gè)人才能、人盡其才的同時(shí),更注重團(tuán)隊(duì)合作精神,強(qiáng)調(diào)時(shí)時(shí)處處自覺維護(hù)公司信譽(yù)和品牌;在堅(jiān)持嚴(yán)謹(jǐn)規(guī)范,公正公平科學(xué)管理的同時(shí),更強(qiáng)調(diào)誠(chéng)信守約、信譽(yù)第一。我們的管理著力于上下和諧,內(nèi)外滿意的一體化原則,我們的追求是讓客戶滿意,讓客戶放心。公司愿與國(guó)內(nèi)外建設(shè)單位建立戰(zhàn)略合作伙伴關(guān)系,共同攜手開創(chuàng)和諧美好的明天!
公司主頁(yè)