精通Python,
掌握ES等數(shù)據(jù)庫,
具備分布式、多進(jìn)程/多線程編程經(jīng)驗(yàn)
擁有大規(guī)模爬蟲系統(tǒng)的設(shè)計(jì)和開發(fā)經(jīng)驗(yàn) 。
熟悉賬號管理、任務(wù)分配、反爬蟲策略,有Telegram API相關(guān)經(jīng)驗(yàn)者為佳
具備獨(dú)立完成爬蟲技術(shù)專項(xiàng)研究的能力,能夠主導(dǎo)項(xiàng)目大規(guī)模擴(kuò)展的技術(shù)選型與可行性研究,并輸出落地方案
熟悉Linux環(huán)境,能獨(dú)立完成云服務(wù)器的部署、配置和優(yōu)化工作