初級(jí)爬蟲工作描述：雙休自研
1. 參與公司數(shù)據(jù)采集與分析項(xiàng)目工作；
2. 參與數(shù)據(jù)采集與分析代碼編寫、單元測(cè)試和bug修復(fù)工作；
3. 根據(jù)產(chǎn)品和項(xiàng)目情況，優(yōu)化及維護(hù)代碼；
4. 根據(jù)產(chǎn)品開發(fā)規(guī)范，完成相關(guān)技術(shù)文檔編寫；
技能要求：
1. 熟悉python的多線程、多進(jìn)程、協(xié)程和selenium等框架；
2.實(shí)踐過代理池、cookie池搭建和使用以及賬號(hào)登錄認(rèn)證；
3.熟悉js逆向，能夠自主去破解，補(bǔ)環(huán)境、解混淆等；
4.熟悉mysql、redis和mongodb數(shù)據(jù)庫，mysql優(yōu)先；
5.有酒店，機(jī)票，信用卡相關(guān)爬取經(jīng)驗(yàn)的優(yōu)先；
6.熟悉git代碼版本管理