職位描述
Python爬蟲開發(fā)
1、負(fù)責(zé)網(wǎng)絡(luò)爬蟲系統(tǒng)平臺(tái)的架構(gòu)設(shè)計(jì)與開發(fā)，完善和重構(gòu)現(xiàn)有采集系統(tǒng)及服務(wù)（如抓取調(diào)度，多樣化抓取，頁面解析和結(jié)構(gòu)化抽取
2、研究爬蟲策略和防屏蔽規(guī)則，解決封賬號(hào)、封IP、驗(yàn)證碼、頁面跳轉(zhuǎn)等難點(diǎn)，提升網(wǎng)頁抓取的效率和質(zhì)量
3、負(fù)責(zé)后臺(tái)爬蟲數(shù)據(jù)的分布式存儲(chǔ)設(shè)計(jì)以及代碼實(shí)現(xiàn)；
2、研究爬蟲策略和防屏蔽規(guī)則，解決封賬號(hào)、封IP、驗(yàn)證碼、頁面跳轉(zhuǎn)等難點(diǎn)，提升網(wǎng)頁抓取的效率和質(zhì)量
3、負(fù)責(zé)后臺(tái)爬蟲數(shù)據(jù)的分布式存儲(chǔ)設(shè)計(jì)以及代碼實(shí)現(xiàn)；
1.熟悉CentOS、Ubuntu操作系統(tǒng)及國產(chǎn)化系統(tǒng)，麒麟，歐拉，龍蜥等等系統(tǒng)的日常運(yùn)維及故障處理等
2.熟悉Kubernetes，DevOps、微服務(wù)治理、SpringCloud、分布式系統(tǒng)等相關(guān)技術(shù)；
3.熟悉主流云服務(wù)平臺(tái)（如阿里云、騰訊云、AWS等），具備3年以上運(yùn)維管理經(jīng)驗(yàn)。
4.熟悉主流監(jiān)控工具（如Zabbix、Grafana、Prometheus等），具有監(jiān)控體系整合與實(shí)施經(jīng)驗(yàn)。
5.具備DevOps、CI/CD、監(jiān)控系統(tǒng)、運(yùn)維自動(dòng)化等工作能力。
6.熟悉openstack虛擬化平臺(tái)，能夠獨(dú)立部署及維護(hù)。
7.具有良好溝通能力，能夠配合開發(fā)及項(xiàng)目經(jīng)理完成工作。
2.熟悉Kubernetes，DevOps、微服務(wù)治理、SpringCloud、分布式系統(tǒng)等相關(guān)技術(shù)；
3.熟悉主流云服務(wù)平臺(tái)（如阿里云、騰訊云、AWS等），具備3年以上運(yùn)維管理經(jīng)驗(yàn)。
4.熟悉主流監(jiān)控工具（如Zabbix、Grafana、Prometheus等），具有監(jiān)控體系整合與實(shí)施經(jīng)驗(yàn)。
5.具備DevOps、CI/CD、監(jiān)控系統(tǒng)、運(yùn)維自動(dòng)化等工作能力。
6.熟悉openstack虛擬化平臺(tái)，能夠獨(dú)立部署及維護(hù)。
7.具有良好溝通能力，能夠配合開發(fā)及項(xiàng)目經(jīng)理完成工作。
工作地點(diǎn)
成都武侯區(qū)天府三街
相似職位
- python爬蟲工程師80-120元/時(shí)
成都 - 武侯
四川好幫手投資有限公司 - 網(wǎng)站爬蟲工程師7000-12000元
成都 - 郫都
成都宇俊盛科技有限公司 - python爬蟲工程師1.5-2.2萬
成都 - 武侯
北京神州飛騰信息科技有限公司 - 高級(jí)爬蟲工程師1-1.4萬
成都 - 錦江
四川仙氣飄飄科技有限公司 - 爬蟲數(shù)據(jù)采集工程師(兼職遠(yuǎn)程)80-120元/時(shí)
成都 - 武侯
四川好幫手投資有限公司 - Python爬蟲開發(fā)工程師:lbll-jf0011.3-1.8萬
成都 - 武侯
北京神州飛騰信息科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動(dòng)招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
柴曉萍/招聘主管
昨日活躍立即溝通
成都海潤(rùn)新能科技有限公司公司成立于2024年10月，坐落于四川省成都市天府新區(qū)天府菁蓉大廈，是一家致力于風(fēng)力發(fā)電行業(yè)售后服務(wù)，專業(yè)推廣新能源技術(shù)的企業(yè)。我司目前業(yè)務(wù)覆蓋片區(qū)為：西北、華東、華南、西南、華北、東北片區(qū)，基本實(shí)現(xiàn)了業(yè)務(wù)全國覆蓋。公司是新疆金風(fēng)科技股份有限公司唯一一家生態(tài)公司戰(zhàn)略合作伙伴，擁有金風(fēng)科技的多項(xiàng)業(yè)務(wù)授權(quán)。金風(fēng)科技是中國風(fēng)電行業(yè)領(lǐng)軍企業(yè)，連續(xù)10年蟬聯(lián)中國風(fēng)電裝機(jī)行業(yè)第一名，全球排名第二，僅次于丹麥 Vestas。
公司主頁