400-885-9898
更新于 3月27日
智聯(lián)APPAPP
舉報

爬蟲

1.6-1.8萬
  • 北京海淀區(qū)
  • 1-3年
  • 本科
  • 全職
  • 招1人

職位描述

PythonSQL數(shù)據(jù)挖掘數(shù)據(jù)清洗數(shù)據(jù)采集爬蟲開發(fā)
崗位職責：
  1. 負責設(shè)計和開發(fā)高效的網(wǎng)絡(luò)爬蟲系統(tǒng)，從各類網(wǎng)站、平臺抓取所需數(shù)據(jù)；
  2. 分析目標網(wǎng)站的結(jié)構(gòu)特點，優(yōu)化爬蟲策略，提高數(shù)據(jù)抓取效率和穩(wěn)定性；
  3. 處理反爬機制，研究并實現(xiàn)突破技術(shù)方案；
  4. 數(shù)據(jù)清洗、整理和存儲，確保數(shù)據(jù)的質(zhì)量和可用性；
  5. 參與大數(shù)據(jù)相關(guān)項目的規(guī)劃和實施，為業(yè)務(wù)決策提供數(shù)據(jù)支持
  6. 任職要求：
    1. 熟練掌握Python或其他編程語言，熟悉Scrapy、BeautifulSoup等爬蟲框架；
    2. 了解HTML、CSS、JavaScript等前端技術(shù)，能夠快速定位和提取網(wǎng)頁中的關(guān)鍵信息；
    3. 熟悉HTTP協(xié)議及網(wǎng)頁請求原理，具備處理動態(tài)加載內(nèi)容的經(jīng)驗；
    4. 具備數(shù)據(jù)分析能力，熟悉MySQL、MongoDB等數(shù)據(jù)庫的使用；
    5. 有應(yīng)對反爬蟲經(jīng)驗者優(yōu)先，如IP代理池、User-Agent偽裝等；

工作地點

百度大廈

入職公司信息

  • 入職公司: 北京百度網(wǎng)訊科技有限公司
  • 公司地址: 北京朝陽區(qū)酒仙橋北路7號電通時代廣場2號樓A區(qū)電通創(chuàng)意廣場
  • 公司人數(shù): 10000人以上

認證資質(zhì)

  • 勞務(wù)派遣經(jīng)營許可認證

    勞務(wù)派遣經(jīng)營許可證是由國家人力資源與社會保障相關(guān)部門頒發(fā)，代表人才經(jīng)紀人所在企業(yè)可以合法開展勞務(wù)派遣相關(guān)業(yè)務(wù)的資質(zhì)證件。展示該標簽代表該企業(yè)發(fā)布此職位時已上傳《勞務(wù)派遣許可證》并經(jīng)由平臺審驗通過。

職位發(fā)布者

芮女士/人事

當前在線
立即溝通
公司Logo首聘(北京)科技有限公司公司標簽
首聘(北京)科技有限公司成立于2015年08月31日，注冊地位于北京市朝陽區(qū)霄云路40號院1號樓12層。經(jīng)營范圍包括一般項目：技術(shù)服務(wù)、技術(shù)開發(fā)、技術(shù)咨詢、技術(shù)交流、技術(shù)轉(zhuǎn)讓、技術(shù)推廣；企業(yè)管理咨詢；社會經(jīng)濟咨詢服務(wù)；軟件開發(fā)；市場調(diào)查（不含涉外調(diào)查）；計算機系統(tǒng)服務(wù)；電子產(chǎn)品銷售；通訊設(shè)備銷售；計算機軟硬件及輔助設(shè)備批發(fā)；計算機軟硬件及輔助設(shè)備零售；人力資源服務(wù)（不含職業(yè)中介活動、勞務(wù)派遣服務(wù)）；外賣遞送服務(wù)；物業(yè)管理；園林綠化工程施工；城市綠化管理；電子、機械設(shè)備維護（不含特種設(shè)備）；電氣設(shè)備修理；通用設(shè)備修理；專用設(shè)備修理；停車場服務(wù)。（除依法須經(jīng)批準的項目外，憑營業(yè)執(zhí)照依法自主開展經(jīng)營活動）許可項目：建筑勞務(wù)分包；第二類增值電信業(yè)務(wù)；測繪服務(wù)；勞務(wù)派遣服務(wù)；食品銷售。（依法須經(jīng)批準的項目，經(jīng)相關(guān)部門批準后方可開展經(jīng)營活動，具體經(jīng)營項目以相關(guān)部門批準文件或許可證件為準）（不得從事國家和本市產(chǎn)業(yè)政策禁止和限制類項目的經(jīng)營活動。）首聘(北京)科技有限公司對外投資12家公司，具有17處分支機構(gòu)
公司主頁