崗位職責(zé)：
1.大數(shù)據(jù)平臺(tái)構(gòu)建與優(yōu)化：
負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的搭建、維護(hù)及性能優(yōu)化(包括Hadoop/Spark等生態(tài)組件)；
設(shè)計(jì)高效的數(shù)據(jù)存儲(chǔ)、計(jì)算方案，支撐業(yè)務(wù)數(shù)據(jù)加工和分析解決海量數(shù)據(jù)處理中的性能瓶頸問題，保障系統(tǒng)穩(wěn)定性
2.數(shù)據(jù)開發(fā)與ETL：
開發(fā)數(shù)據(jù)清洗、轉(zhuǎn)換和加載(ETL)流程，確保數(shù)據(jù)質(zhì)量和時(shí)效性；構(gòu)建數(shù)據(jù)倉庫/數(shù)據(jù)湖模型，支持多維度數(shù)據(jù)分析需求
3.應(yīng)用開發(fā)與組件運(yùn)維：
配合研發(fā)團(tuán)隊(duì)完成數(shù)據(jù)服務(wù)API開發(fā)，支撐前端/業(yè)務(wù)系統(tǒng)數(shù)據(jù)需求，制定和執(zhí)行數(shù)據(jù)編碼、測試和部署策略
4.跨團(tuán)隊(duì)協(xié)作
與產(chǎn)品、業(yè)務(wù)部門溝通需求，將數(shù)據(jù)能力轉(zhuǎn)化為實(shí)際解決方案
能力要求：
1.本科及以上學(xué)歷，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn)
2.熟悉至少一種編程語言（如Python\Java），熟悉Linux開發(fā)環(huán)境
3.精通hadoop生態(tài)系統(tǒng)中的工具與技術(shù)。熟練掌握Spark/Hive/Flink等大數(shù)據(jù)框架，有性能調(diào)優(yōu)經(jīng)驗(yàn)熟悉SQL/NoSQL數(shù)據(jù)庫(MySQL/MongoDB/
ElasticSearch等)
4.熟悉云計(jì)算平臺(tái)和容器化技術(shù)，并具備相關(guān)調(diào)試和管理經(jīng)驗(yàn)
5.具備極強(qiáng)的團(tuán)隊(duì)協(xié)作能力和解決問題能力