職位描述
PythonHTMLSQLrequests互聯(lián)網(wǎng)
1. 負(fù)責(zé)海量互聯(lián)網(wǎng)數(shù)據(jù)的定向抓取、清洗與結(jié)構(gòu)化；
2. 搭建高效穩(wěn)定的數(shù)據(jù)采集系統(tǒng)與調(diào)度框架；
3. 對反爬機(jī)制進(jìn)行識別、規(guī)避及應(yīng)對；
4. 定期維護(hù)爬蟲策略，確保數(shù)據(jù)持續(xù)可用；
5. 與產(chǎn)品、數(shù)據(jù)分析、AI建模團(tuán)隊(duì)協(xié)作，提供定制化數(shù)據(jù)支持。
2. 搭建高效穩(wěn)定的數(shù)據(jù)采集系統(tǒng)與調(diào)度框架；
3. 對反爬機(jī)制進(jìn)行識別、規(guī)避及應(yīng)對；
4. 定期維護(hù)爬蟲策略，確保數(shù)據(jù)持續(xù)可用；
5. 與產(chǎn)品、數(shù)據(jù)分析、AI建模團(tuán)隊(duì)協(xié)作，提供定制化數(shù)據(jù)支持。
技能要求：
? 精通 Python（Scrapy / requests / selenium 等庫）；
? 熟悉網(wǎng)頁結(jié)構(gòu)（HTML/DOM/XPath/Regex）；
? 熟悉代理IP、Cookies管理、Header偽裝、驗(yàn)證碼識別等反爬機(jī)制；
? 具備良好的代碼結(jié)構(gòu)意識和日志監(jiān)控能力；
? 有大型網(wǎng)站（如港交所、雪球、EDGAR、天眼查等）實(shí)戰(zhàn)抓取經(jīng)驗(yàn)優(yōu)先；
? 具備 異步爬蟲 / 多線程 / 分布式爬蟲開發(fā)經(jīng)驗(yàn)者優(yōu)先；
? 熟悉 MySQL/MongoDB/Elasticsearch 等任一存儲技術(shù)。
加分項(xiàng)：
? 熟悉 JavaScript 動態(tài)頁面渲染處理；
? 具備 NLP/AI 數(shù)據(jù)預(yù)處理經(jīng)驗(yàn)；
? 有使用云服務(wù)（如 AWS Lambda、阿里云函數(shù)計(jì)算）部署爬蟲經(jīng)驗(yàn)；
? 熟悉 Docker + CI/CD 流程。
? 精通 Python（Scrapy / requests / selenium 等庫）；
? 熟悉網(wǎng)頁結(jié)構(gòu)（HTML/DOM/XPath/Regex）；
? 熟悉代理IP、Cookies管理、Header偽裝、驗(yàn)證碼識別等反爬機(jī)制；
? 具備良好的代碼結(jié)構(gòu)意識和日志監(jiān)控能力；
? 有大型網(wǎng)站（如港交所、雪球、EDGAR、天眼查等）實(shí)戰(zhàn)抓取經(jīng)驗(yàn)優(yōu)先；
? 具備 異步爬蟲 / 多線程 / 分布式爬蟲開發(fā)經(jīng)驗(yàn)者優(yōu)先；
? 熟悉 MySQL/MongoDB/Elasticsearch 等任一存儲技術(shù)。
加分項(xiàng)：
? 熟悉 JavaScript 動態(tài)頁面渲染處理；
? 具備 NLP/AI 數(shù)據(jù)預(yù)處理經(jīng)驗(yàn)；
? 有使用云服務(wù)（如 AWS Lambda、阿里云函數(shù)計(jì)算）部署爬蟲經(jīng)驗(yàn)；
? 熟悉 Docker + CI/CD 流程。
工作地點(diǎn)
深圳福田區(qū)新世界中心
相似職位
- python爬蟲（實(shí)習(xí)）150-200元/天
深圳 - 寶安
深圳市胖達(dá)摸魚科技有限公司 - 爬蟲實(shí)習(xí)生150-200元/天
深圳 - 寶安
深圳市胖達(dá)摸魚科技有限公司 - python開發(fā)工程師（爬蟲/大數(shù)據(jù)）1.2-1.7萬
深圳 - 鹽田
深圳建廣數(shù)字科技有限公司青島分公司 - python爬蟲工程師1.2-1.5萬
深圳 - 龍崗
軟通動力信息技術(shù)(集團(tuán))股份有限公司 - 爬蟲工程師1.6-2萬
深圳 - 南山
重慶市本手科技有限公司 - python爬蟲工程師(實(shí)習(xí)）150-200元/天
深圳 - 寶安
深圳市胖達(dá)摸魚科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
鞏文珠/人事經(jīng)理
立即溝通
華檢企業(yè)管理(深圳)有限公司華檢醫(yī)療（01931.HK），全球醫(yī)療創(chuàng)新藥科技金融基礎(chǔ)設(shè)施構(gòu)建者。首創(chuàng)以醫(yī)療創(chuàng)新藥高科技資產(chǎn)為核心的「NewCo+RWA」Web3交易所生態(tài)——IVDNewCo Exchange，并配套發(fā)行專有穩(wěn)定幣“IVDD”（IVDDollar）。華檢醫(yī)療（01931.HK）是全球醫(yī)療創(chuàng)新藥穩(wěn)定幣第一股；全球醫(yī)療創(chuàng)新藥NewCo+RWA交易所第一股；全球港美股雙重上市/港美雙穩(wěn)定幣牌照申請第一股。該戰(zhàn)略旨在顛覆傳統(tǒng)醫(yī)藥行業(yè)發(fā)展規(guī)則，通過整合Web3技術(shù)（包括RWA真實(shí)世界資產(chǎn)代幣化、區(qū)塊鏈交易及穩(wěn)定幣機(jī)制），提升全球醫(yī)療創(chuàng)新藥資產(chǎn)的流動性、融資效率及可及性，以"幣股聯(lián)動"機(jī)制貫通全球資本市場，驅(qū)動醫(yī)療創(chuàng)新效率革命。公眾號：華檢NewCohttps://mp.weixin.qq.com/s/fcdOa3gLr2NnOhxYCqFNPg
公司主頁