雇員點評標簽
職位描述
Python
爬蟲工程師崗位職責：
1、負責大規(guī)模網(wǎng)頁數(shù)據(jù)的抓取、清洗及結(jié)構(gòu)化存儲，保障數(shù)據(jù)質(zhì)量和時效性；
2、突破各類反爬限制（如 IP 封禁、驗證碼、動態(tài)加載等），設(shè)計高效穩(wěn)定的數(shù)據(jù)采集方案；
3、設(shè)計并優(yōu)化分布式爬蟲架構(gòu)，提升系統(tǒng)并發(fā)能力和容錯性；
4、維護數(shù)據(jù)采集鏈路，協(xié)同產(chǎn)品和項目團隊完成數(shù)據(jù)交付與應(yīng)用；
任職要求：
1、精通 Python 及 Scrapy 、Pyspider框架，熟悉常見反爬應(yīng)對策略；
2、深入理解 HTTP、HTTPS 協(xié)議和前端渲染機制，能獨立分析動態(tài)網(wǎng)頁結(jié)構(gòu)；
3、掌握主流數(shù)據(jù)庫（ MySQL / MongoDB / Redis / HBase 等）；
4、熟悉瀏覽器自動化工具及JS逆向分析；
5、有分布式爬蟲開發(fā)經(jīng)驗，熟悉任務(wù)調(diào)度與性能優(yōu)化；
6、3年以上爬蟲開發(fā)經(jīng)驗，主導過中大型爬蟲項目落地；
7、有文旅文博行業(yè)數(shù)據(jù)采集經(jīng)驗優(yōu)先。
1、負責大規(guī)模網(wǎng)頁數(shù)據(jù)的抓取、清洗及結(jié)構(gòu)化存儲，保障數(shù)據(jù)質(zhì)量和時效性；
2、突破各類反爬限制（如 IP 封禁、驗證碼、動態(tài)加載等），設(shè)計高效穩(wěn)定的數(shù)據(jù)采集方案；
3、設(shè)計并優(yōu)化分布式爬蟲架構(gòu)，提升系統(tǒng)并發(fā)能力和容錯性；
4、維護數(shù)據(jù)采集鏈路，協(xié)同產(chǎn)品和項目團隊完成數(shù)據(jù)交付與應(yīng)用；
任職要求：
1、精通 Python 及 Scrapy 、Pyspider框架，熟悉常見反爬應(yīng)對策略；
2、深入理解 HTTP、HTTPS 協(xié)議和前端渲染機制，能獨立分析動態(tài)網(wǎng)頁結(jié)構(gòu)；
3、掌握主流數(shù)據(jù)庫（ MySQL / MongoDB / Redis / HBase 等）；
4、熟悉瀏覽器自動化工具及JS逆向分析；
5、有分布式爬蟲開發(fā)經(jīng)驗，熟悉任務(wù)調(diào)度與性能優(yōu)化；
6、3年以上爬蟲開發(fā)經(jīng)驗，主導過中大型爬蟲項目落地；
7、有文旅文博行業(yè)數(shù)據(jù)采集經(jīng)驗優(yōu)先。
工作地點
成華區(qū)中國電信股份有限公司(成都分公司)成都雙林北支路473號中國電信大廈F1層
相似職位
- 爬蟲工程師1.2-1.8萬
成都 - 成華
南京邁特望科技股份有限公司 - 初級AI爬蟲工程師1-1.5萬
成都 - 青羊
掌起(成都)供應(yīng)鏈管理有限公司 - 后端開發(fā)工程師（爬蟲與自動化方向）9000-14000元·13薪
成都 - 武侯
成都藍色兄弟網(wǎng)絡(luò)科技有限公司 - 數(shù)據(jù)分析崗（爬蟲工程師）8000-13000元
成都 - 郫都
中鐵科學研究院集團有限公司 - 爬蟲工程師 (MJ000737)1.6-2.5萬
成都 - 雙流
中國網(wǎng)安 - 網(wǎng)絡(luò)爬蟲工程師1.5-1.6萬
成都 - 武侯
中電金信軟件有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
宋女士/招聘
昨日活躍立即溝通
南京邁特望科技股份有限公司南京邁特望科技股份有限公司成立于2000年，注冊資本4692.8萬元，在職員工3000+人，于2016年8月10日在新三板掛牌，股票代碼NEEQ:838955。公司主要從事I行業(yè)解決方案、智慧養(yǎng)老、020電子商務(wù)三大領(lǐng)域，為客戶提供T人力外包解決方案、智慧養(yǎng)老解決方案、智能家居售后服務(wù)解決方案，業(yè)務(wù)遍及國內(nèi)及日本等市場。公司旗下現(xiàn)有江蘇鎖安科技等20家分子公司南京邁特望科技股份有限公司是高新技術(shù)企業(yè)、軟件企業(yè)，擁有發(fā)明專利2項、軟件著權(quán)65項、軟性產(chǎn)品26項，獲得了ISO9001質(zhì)量管理體系證、ISO27001信息安全管理體系認證、1SO20000T服務(wù)管理體系認證S014001環(huán)境管理體系認證、1SO45001職業(yè)健康安全管理體系認證CMMI3軟性能力成熟度模型集成三級、CS2信息系統(tǒng)建設(shè)和服務(wù)能力評、AAA級信用企業(yè)、南京市信用管理培訓合格企業(yè)證書、南京市工程技術(shù)研究中心等資質(zhì)。公司是南京國際服務(wù)外包企業(yè)協(xié)會理事單位、養(yǎng)老服務(wù)信息化建設(shè)工作委員會(SSIDC)核心委員、人力資源產(chǎn)業(yè)協(xié)會理事單位、人工智能行業(yè)協(xié)會會員單位、江蘇省信息化協(xié)會會員單位、江蘇省老齡產(chǎn)業(yè)協(xié)會理事單位、軟件谷云計算大數(shù)據(jù)信息安全產(chǎn)業(yè)聯(lián)盟會員單位，并先后獲得了江蘇省技術(shù)先進型服務(wù)企業(yè)、江蘇省試信經(jīng)營示范單位等榮譽，是亞信、恒生電子、南瑞、中電鴻信、電信、微軟、360、中興、浩航、蘇寧、上?？?、中移物聯(lián)、北斗衛(wèi)星研究院、江蘇海隆、富士通、帆軟、深信服、中通服、中控、感動科技、中國民生銀行、京東五星、中建八局、拜特、中電智恒、上海道客、揚州萊斯等公司的核心合作伙伴。
公司主頁