更新于 3月12日

python爬蟲工程師

5000-10000元
  • 鄭州金水區(qū)
  • 3-5年
  • 本科
  • 全職
  • 招1人

職位描述

Python
崗位職責(zé)
1. 運用Deepseek、Grok和Crawl4ai等工具組合,設(shè)計并開發(fā)高效的網(wǎng)絡(luò)爬蟲系統(tǒng),實現(xiàn)對各類網(wǎng)站數(shù)據(jù)的精準(zhǔn)抓取。
2. 負(fù)責(zé)優(yōu)化爬蟲程序,提高數(shù)據(jù)采集的效率和質(zhì)量,確保在復(fù)雜網(wǎng)絡(luò)環(huán)境和反爬機制下仍能穩(wěn)定運行。
3. 對采集到的數(shù)據(jù)進行清洗、整理和初步分析,為后續(xù)的數(shù)據(jù)分析和業(yè)務(wù)決策提供支持。
4. 與其他部門緊密合作,根據(jù)業(yè)務(wù)需求提供數(shù)據(jù)支持,協(xié)助解決數(shù)據(jù)相關(guān)的問題。
5. 關(guān)注行業(yè)技術(shù)動態(tài),不斷探索和引入新的爬蟲技術(shù)和工具,提升團隊的技術(shù)水平。
任職資格:
1. 計算機相關(guān)專業(yè)本科及以上學(xué)歷,3年以上網(wǎng)絡(luò)爬蟲開發(fā)經(jīng)驗。
2. 有爬蟲經(jīng)驗,掌握python語言,熟悉requests/scrapy等爬蟲組件或框架,熟悉多線程編程;
4.擅長各類爬蟲分析策略設(shè)定和防屏蔽規(guī)則設(shè)計,熟悉爬蟲IP管理池、分布式爬蟲設(shè)計機制,對于爬蟲效率和質(zhì)量的控制具備一定的經(jīng)驗;
3. 精通Deepseek、Grok和Crawl4ai工具的使用,能夠靈活運用它們解決各種數(shù)據(jù)采集問題。
4. 深入理解HTTP協(xié)議、HTML、CSS、JavaScript等前端技術(shù),熟悉網(wǎng)頁結(jié)構(gòu)和數(shù)據(jù)交互原理。
5. 有豐富的應(yīng)對反爬蟲策略的經(jīng)驗,如IP代理、驗證碼識別、動態(tài)頁面解析等。
6. 具備良好的團隊合作精神和溝通能力,能夠承受一定的工作壓力,有較強的學(xué)習(xí)能力和解決問題的能力。

工作地點

福晟國際3號樓6樓

職位發(fā)布者

彭帆/HRBP

昨日活躍
立即溝通
公司Logo定成(鄭州)商貿(mào)有限公司
折扣牛是一家以硬折扣為主的線下商超。從 2019年至今,折扣牛從無到有,由小到大,已從一個名不見經(jīng)傳的小企業(yè)發(fā)展為零售超市行業(yè)中的舉足輕重,具有現(xiàn)代企業(yè)管理體制的公司,同時也形成了獨具特色的管理思想和經(jīng)營模式,積淀了厚重的文化底蘊。現(xiàn)已在河南省內(nèi)簽約合作伙伴超過300家。年接待消費者超過30000000人次,折扣牛通過高效的周轉(zhuǎn)效率24小時營業(yè),現(xiàn)金直采,降低產(chǎn)品的價格,秉持為人民省錢的使命,讓消費者用100元錢在折扣牛能買到更多優(yōu)質(zhì)的商品。折扣牛的商業(yè)模型將會從省會下沉到鄉(xiāng)村,把滿足人民日益增長的美好生活需要和不平衡不充分的發(fā)展之間的這個主要社會矛盾,深深的刻在企業(yè)骨子里。通過硬折扣超市的商業(yè)模型,為中國北方廣大的城鎮(zhèn)、鄉(xiāng)村提供高品質(zhì)低價格的商品服務(wù)。折扣牛是中國硬折扣品類的開拓者,低價創(chuàng)造無價的踐行者擁有強大的中臺管理系統(tǒng)、標(biāo)準(zhǔn)化運營體系、強大的物流供應(yīng)鏈體系,是國內(nèi)較早致力于硬折扣零售的經(jīng)營與商業(yè)發(fā)展的創(chuàng)新型企業(yè)。
公司主頁