崗位職責(zé)（自研項(xiàng)目）
1.依據(jù)業(yè)務(wù)需求，規(guī)劃并實(shí)現(xiàn)高效穩(wěn)定的網(wǎng)絡(luò)爬蟲系統(tǒng)，完成多源數(shù)據(jù)的自動(dòng)化抓取與整合；
2.負(fù)責(zé)爬蟲系統(tǒng)的日常運(yùn)維與性能調(diào)優(yōu)，應(yīng)對(duì)反爬策略、IP限制、數(shù)據(jù)清洗等技術(shù)挑戰(zhàn)；
3.持續(xù)跟蹤國(guó)內(nèi)外前沿爬蟲技術(shù)與框架，推動(dòng)新技術(shù)落地，提升團(tuán)隊(duì)開發(fā)效率與技術(shù)水平；
4.撰寫規(guī)范的技術(shù)文檔、開發(fā)方案及操作指南，完善爬蟲開發(fā)流程與標(biāo)準(zhǔn)化體系；
5.嚴(yán)格遵循數(shù)據(jù)合規(guī)與隱私保護(hù)相關(guān)法規(guī)，確保采集行為合法合規(guī)，保障數(shù)據(jù)安全可控；
6.構(gòu)建爬蟲運(yùn)行監(jiān)控體系，實(shí)時(shí)掌握系統(tǒng)狀態(tài)，及時(shí)發(fā)現(xiàn)并處理異常與故障；
7.協(xié)同團(tuán)隊(duì)完成其他與爬蟲相關(guān)的技術(shù)工作，積極參與技術(shù)交流與團(tuán)隊(duì)能力建設(shè)。

任職要求
1.本科及以上學(xué)歷，計(jì)算機(jī)科學(xué)、軟件工程、信息技術(shù)等相關(guān)專業(yè)，具備3年以上爬蟲開發(fā)經(jīng)驗(yàn)；
2.精通Python語(yǔ)言，熟練使用Scrapy、BeautifulSoup、Selenium、Requests等主流爬蟲工具；
3.掌握常見反爬機(jī)制的應(yīng)對(duì)方法，如驗(yàn)證碼識(shí)別、動(dòng)態(tài)頁(yè)面加載、IP代理池構(gòu)建等；
4.具備良好的數(shù)據(jù)庫(kù)設(shè)計(jì)與操作能力，熟悉MySQL、MongoDB等常用數(shù)據(jù)庫(kù)；
5.熟悉《網(wǎng)絡(luò)安全法》《個(gè)人信息保護(hù)法》等數(shù)據(jù)合規(guī)法律法規(guī)，有相關(guān)項(xiàng)目經(jīng)驗(yàn)者優(yōu)先；
6.具備出色的分析與解決問(wèn)題能力，能獨(dú)立承擔(dān)爬蟲系統(tǒng)的設(shè)計(jì)、開發(fā)與維護(hù)工作；
7.具備良好的溝通協(xié)作意識(shí)和團(tuán)隊(duì)精神，學(xué)習(xí)能力強(qiáng)，樂(lè)于技術(shù)探索與分享；
8.有藍(lán)領(lǐng)招聘或人力資源行業(yè)數(shù)據(jù)采集經(jīng)驗(yàn)者優(yōu)先考慮。