職位描述
Python數(shù)據(jù)清洗數(shù)據(jù)挖掘數(shù)據(jù)采集爬蟲開發(fā)反爬蟲
1、負(fù)責(zé)網(wǎng)絡(luò)爬蟲及優(yōu)化爬蟲策略，進(jìn)行國(guó)內(nèi)外平臺(tái)信息的抓取和分析。
2、完成數(shù)據(jù)采集與爬取、解析處理、入庫等數(shù)據(jù)日常工作。
3、積極主動(dòng)思考探索爬蟲在實(shí)際業(yè)務(wù)中的價(jià)值，參與設(shè)計(jì)數(shù)據(jù)有效利用策略，從數(shù)據(jù)合理性、完整性角度提供建議。
4、把握網(wǎng)絡(luò)爬蟲核心技術(shù)研究方向，研究?jī)?yōu)化算法，提升爬蟲系統(tǒng)的穩(wěn)定性、可擴(kuò)展性。
5、設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則，提升網(wǎng)頁抓取的效率和質(zhì)量。
6、負(fù)責(zé)線上線下業(yè)務(wù)數(shù)據(jù)的提取、數(shù)據(jù)分析、報(bào)告輸出、報(bào)表開發(fā)工作
7、與業(yè)務(wù)團(tuán)隊(duì)有效并高效溝通，能夠站在數(shù)據(jù)分析及業(yè)務(wù)運(yùn)營(yíng)角度，引導(dǎo)并幫助業(yè)務(wù)團(tuán)隊(duì)拆解并定位問題，明確需求，通過對(duì)數(shù)據(jù)分析需求的準(zhǔn)確理解及把握，為業(yè)務(wù)提供數(shù)據(jù)決策和策略支持。
任職要求：
1、本科以上學(xué)歷，2年以上爬蟲項(xiàng)目經(jīng)驗(yàn)，具備良好的計(jì)算機(jī)專業(yè)知識(shí)，熟悉python等語言，有較強(qiáng)的數(shù)據(jù)處理能力，精通SQL，同時(shí)具備良好溝通能力和文檔撰寫能力；
2、熟悉爬蟲原理，熟悉Scrapy、pyspider等主流爬蟲框架框架，能夠解決封賬號(hào)、封IP、驗(yàn)證碼、網(wǎng)頁限制爬取等問題，且有實(shí)際經(jīng)驗(yàn)。
3、熟悉Selenium、PhantomJS 、WebDriver等技術(shù)的應(yīng)用。
4、熟悉Django、flask等web框架的使用，熟悉Hadoop、ElasticSearch等技術(shù)。
5、業(yè)務(wù)理解和分析轉(zhuǎn)化能力較強(qiáng)，富有進(jìn)取精神及團(tuán)隊(duì)合作精神，責(zé)任心強(qiáng)，善于合作溝通，能夠承受壓力。
6、有國(guó)外LinkedIn等社媒平臺(tái)、海關(guān)數(shù)據(jù)的挖掘經(jīng)驗(yàn)者優(yōu)先。
2、完成數(shù)據(jù)采集與爬取、解析處理、入庫等數(shù)據(jù)日常工作。
3、積極主動(dòng)思考探索爬蟲在實(shí)際業(yè)務(wù)中的價(jià)值，參與設(shè)計(jì)數(shù)據(jù)有效利用策略，從數(shù)據(jù)合理性、完整性角度提供建議。
4、把握網(wǎng)絡(luò)爬蟲核心技術(shù)研究方向，研究?jī)?yōu)化算法，提升爬蟲系統(tǒng)的穩(wěn)定性、可擴(kuò)展性。
5、設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則，提升網(wǎng)頁抓取的效率和質(zhì)量。
6、負(fù)責(zé)線上線下業(yè)務(wù)數(shù)據(jù)的提取、數(shù)據(jù)分析、報(bào)告輸出、報(bào)表開發(fā)工作
7、與業(yè)務(wù)團(tuán)隊(duì)有效并高效溝通，能夠站在數(shù)據(jù)分析及業(yè)務(wù)運(yùn)營(yíng)角度，引導(dǎo)并幫助業(yè)務(wù)團(tuán)隊(duì)拆解并定位問題，明確需求，通過對(duì)數(shù)據(jù)分析需求的準(zhǔn)確理解及把握，為業(yè)務(wù)提供數(shù)據(jù)決策和策略支持。
任職要求：
1、本科以上學(xué)歷，2年以上爬蟲項(xiàng)目經(jīng)驗(yàn)，具備良好的計(jì)算機(jī)專業(yè)知識(shí)，熟悉python等語言，有較強(qiáng)的數(shù)據(jù)處理能力，精通SQL，同時(shí)具備良好溝通能力和文檔撰寫能力；
2、熟悉爬蟲原理，熟悉Scrapy、pyspider等主流爬蟲框架框架，能夠解決封賬號(hào)、封IP、驗(yàn)證碼、網(wǎng)頁限制爬取等問題，且有實(shí)際經(jīng)驗(yàn)。
3、熟悉Selenium、PhantomJS 、WebDriver等技術(shù)的應(yīng)用。
4、熟悉Django、flask等web框架的使用，熟悉Hadoop、ElasticSearch等技術(shù)。
5、業(yè)務(wù)理解和分析轉(zhuǎn)化能力較強(qiáng)，富有進(jìn)取精神及團(tuán)隊(duì)合作精神，責(zé)任心強(qiáng)，善于合作溝通，能夠承受壓力。
6、有國(guó)外LinkedIn等社媒平臺(tái)、海關(guān)數(shù)據(jù)的挖掘經(jīng)驗(yàn)者優(yōu)先。
工作地點(diǎn)
江寧區(qū)江蘇省南京市蘇源大道68-28號(hào) 聯(lián)亞國(guó)際大廈 4樓
相似職位
- python爬蟲工程師1.2-1.4萬
南京 - 雨花臺(tái)
拓保軟件
- python數(shù)據(jù)分析師1.6-1.8萬·13薪
南京 - 江寧
聯(lián)亞國(guó)際 - 爬蟲工程師1-1.4萬
南京 - 雨花臺(tái)
深圳市睿服科技有限公司 - python爬蟲工程師1.3-1.4萬
南京 - 雨花臺(tái)
中電金信軟件有限公司 南京 - 建鄴
中通服設(shè)計(jì)院
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
陸女士/招聘主管
今日活躍立即溝通
聯(lián)亞國(guó)際
“聯(lián)亞國(guó)際展覽集團(tuán)”（“聯(lián)亞國(guó)際”）是在中德合作基礎(chǔ)上成立的專業(yè)展覽集團(tuán)，為“國(guó)際展覽業(yè)協(xié)會(huì)（UFI）”成員、“國(guó)際展覽管理協(xié)會(huì)（IAEM）”會(huì)員，通過ISO9001質(zhì)量認(rèn)證、獲評(píng)AAA資信等級(jí)，是國(guó)家公安部授權(quán)的因私出入境中介機(jī)構(gòu)，被評(píng)選為“會(huì)展經(jīng)濟(jì)先進(jìn)單位”、“中國(guó)國(guó)際會(huì)展專業(yè)委員會(huì)理事長(zhǎng)單位”、“中國(guó)十佳出展機(jī)構(gòu)”、“中國(guó)十大影響力會(huì)展企業(yè)”、“中國(guó)最佳會(huì)展企業(yè)”?！奥?lián)亞國(guó)際”自2001年起正式運(yùn)作，集團(tuán)總部設(shè)在南京，在浙江、山東、重慶、廣東、上海等省市設(shè)有分支機(jī)構(gòu)，現(xiàn)在職員工200余人；主體業(yè)務(wù)包括：境外辦展、出國(guó)組展、境內(nèi)辦展、境外考察、會(huì)議服務(wù)、因私出入境服務(wù)等。出國(guó)組展：秉承“客戶至上，服務(wù)為本”的經(jīng)營(yíng)宗旨，“聯(lián)亞國(guó)際”年均組團(tuán)出展140余項(xiàng)目、涉及20多產(chǎn)業(yè)大類、年出訪30多國(guó)家，截止2014年底，已成功組織9500多企業(yè)出國(guó)參展1160余次，與突尼斯、肯尼亞、印度、阿根廷、俄羅斯、巴西、土耳其、斯洛伐克、塞爾維亞、斯洛文尼亞、德、荷、法、意、美、日等地區(qū)展會(huì)長(zhǎng)期密切合作，是若干知名國(guó)際展會(huì)在中國(guó)的獨(dú)家代理。境外辦展：“聯(lián)亞國(guó)際”在突尼斯、塞爾維亞、斯洛文尼亞舉辦PB（Premium Brands China--中國(guó)精品展）系列展，承接國(guó)內(nèi)行業(yè)協(xié)會(huì)、中央和地方經(jīng)貿(mào)部門舉辦的境外展。境內(nèi)辦展：“聯(lián)亞國(guó)際”自辦來華展涉及船舶工業(yè)、海洋工程、家居用品等諸多行業(yè)，自主品牌展會(huì)不斷增多，以中外合資、獨(dú)資方式在國(guó)內(nèi)舉辦的自辦展包括：“聯(lián)亞國(guó)際”攜手德國(guó)法蘭克福展覽有限公司，引入其全球最大的消費(fèi)品展會(huì)品牌Ambiente，2007年起在上海合資主辦“中國(guó)國(guó)際時(shí)尚家居用品展覽會(huì)（ILC）”。2010年，“聯(lián)亞國(guó)際”將周邊相關(guān)展合并、收購，連續(xù)成功舉辦“中國(guó)國(guó)際船舶工業(yè)博覽會(huì)（CIMPS,“中國(guó)十佳品牌展會(huì)”）”，“中船展”現(xiàn)已發(fā)展為中國(guó)最大的專業(yè)船舶工業(yè)展！“中國(guó)國(guó)際海洋工程與油氣技術(shù)展覽會(huì)（OTE）”始辦于2012年，定位于具有國(guó)際影響力的國(guó)際性、專業(yè)性、貿(mào)易性展會(huì)，由“聯(lián)亞國(guó)際”策劃并執(zhí)行。“聯(lián)亞國(guó)際”倡導(dǎo)“盡責(zé)務(wù)實(shí)、敏捷超越、以司為家、奉獻(xiàn)博愛”的“聯(lián)亞精神”，藉專業(yè)周到的服務(wù)理念、以人為本的操作，贏得新老朋友的一致認(rèn)可和長(zhǎng)期支持，培育出“聯(lián)亞國(guó)際”極高的知名度和美譽(yù)度、創(chuàng)造出獨(dú)特的“聯(lián)亞國(guó)際”品牌優(yōu)勢(shì)?！奥?lián)亞國(guó)際”已發(fā)展為中國(guó)最大的專業(yè)展覽集團(tuán)之一！
公司主頁