本該崗位實行單休制度，公司管理靈活，支持調(diào)休且可累計調(diào)休，歡迎積極投遞簡歷。
崗位職責
1、對主流直播平臺內(nèi)容采集系統(tǒng)（抖音 / 小紅書 / 快手 / 視頻號）的多端系統(tǒng)內(nèi)容抓取、數(shù)據(jù)提取、破解反爬策略;
2、負責多平臺信息抽取、數(shù)據(jù)清洗、入庫、服務化等研發(fā)和優(yōu)化工作;
3、參與開發(fā)和設計分布式網(wǎng)絡爬蟲系統(tǒng)，進行信息的抓取和分析工作;
4、研究優(yōu)化爬蟲算法，提升爬蟲系統(tǒng)的穩(wěn)定性、可擴展性;
5、獨立解決實際開發(fā)過程中碰到的各類產(chǎn)品數(shù)據(jù)需求和接口問題。
任職要求
1、計算機相關專業(yè)本科或以上學歷，4年以上相關工作經(jīng)驗;
2、精通Linux/UNIX，精通Python語言，至少熟練掌握主流爬蟲框架中的一種;
3、精通Charles等抓包工具，精通網(wǎng)頁抓取原理及技術，精通正則表達式，熟練從結構化和非結構化的數(shù)據(jù)中獲取
4、熟練各種加密算法，在破解驗證碼方面有豐富經(jīng)驗，能夠獨立解決js反爬和模擬登陸問題;;
5、熟練掌握應用Selenium、PhantomJS、Splash、Puppeteer實施動態(tài)抓取;
6、熟悉破解網(wǎng)站驗證碼、繞過機器人檢測、APP脫殼、APP逆向反編譯等技術;
7、熟練使用Mysql/Redis者;
8、對主流直播平臺內(nèi)容采集系統(tǒng)（抖音 / 小紅書 / 快手 / 視頻號）的多端系統(tǒng)抓取成功案例優(yōu)先錄取;