職位描述
爬蟲(chóng)開(kāi)發(fā)反爬蟲(chóng)分布式爬蟲(chóng)Scrapy計(jì)算機(jī)軟件
崗位職責(zé)：
1. 根據(jù)業(yè)務(wù)需求，研究爬蟲(chóng)策略和防屏蔽規(guī)則，設(shè)計(jì)和開(kāi)發(fā)分布式爬蟲(chóng)，支持高并發(fā)多平臺(tái)抓??；
2. 負(fù)責(zé)網(wǎng)頁(yè)信息抽取、簡(jiǎn)單清洗、數(shù)據(jù)入庫(kù)等開(kāi)發(fā)；
3. 提升爬蟲(chóng)穩(wěn)定性及可擴(kuò)展性，充分利用資源，優(yōu)化爬蟲(chóng)效率和質(zhì)量。
任職資格：
1. 計(jì)算機(jī)軟件及相關(guān)專(zhuān)業(yè)本科畢業(yè)；
2. 1年以上爬蟲(chóng)項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn)，優(yōu)秀畢業(yè)生亦可；
3.了解或處理過(guò)手機(jī)端抓包、源碼分析等；
4.了解或處理過(guò)webpack、jsvmp等
5. 熟悉爬蟲(chóng)原理及常見(jiàn)的反爬蟲(chóng)技術(shù)，如cookie、js加密、base64等；
6. 熟練運(yùn)用python及多進(jìn)程、多線程開(kāi)發(fā)；
7. 熟練使用scrapy、requests、selenium、pyppeteer等爬蟲(chóng)包；
8. 熟悉html，正則、xpath等提取技術(shù)；
9. 熟悉Mysql、Redis等數(shù)據(jù)庫(kù)及相關(guān)操作；
10. 熟悉Linux基礎(chǔ)命令；
11. 有Django/Flask等web框架開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先。
工作地點(diǎn)
北京海淀區(qū)拓爾思集團(tuán)總部金隅西三旗科技園3號(hào)樓
相似職位
- 中高級(jí)python爬蟲(chóng)工程師2-3萬(wàn)
北京 - 石景山
北京大享科技有限公司 - 后端開(kāi)發(fā)工程師1-1.8萬(wàn)
北京 - 朝陽(yáng)
美通社 北京 - 朝陽(yáng)
中軟國(guó)際- python爬蟲(chóng)工程師1.6-2.4萬(wàn)
北京 - 西城
西安易行慧通旅游發(fā)展有限公司 - Python互聯(lián)網(wǎng)數(shù)據(jù)采集（爬蟲(chóng)）開(kāi)發(fā)工程師8000-16000元·13薪
北京 - 海淀
北京萬(wàn)智信達(dá)智能科技有限公司 - python爬蟲(chóng)工程師1.4-2萬(wàn)
北京 - 海淀
北京正合綠勢(shì)生態(tài)科技有限公司
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
寧姜燕/HRBP
當(dāng)前在線立即溝通
拓爾思信息技術(shù)股份有限公司拓爾思信息技術(shù)股份有限公司成立于1993年，是中文全文檢索技術(shù)的開(kāi)創(chuàng)者，國(guó)內(nèi)領(lǐng)先的人工智能、大數(shù)據(jù)和數(shù)據(jù)安全產(chǎn)品及服務(wù)提供商。公司2011年在深圳證券交易所創(chuàng)業(yè)板上市，股票代碼300229。公司員工2000多人，在全國(guó)設(shè)有4大區(qū)域中心和31個(gè)城市設(shè)有分支機(jī)構(gòu)。公司自主研發(fā)的產(chǎn)品已被國(guó)內(nèi)外10000家企業(yè)級(jí)用戶廣泛使用。
公司主頁(yè)