【崗位職責(zé)】 1、大數(shù)據(jù)平臺(tái)構(gòu)建與智能升級(jí):基于 Dataworks 搭建分布式數(shù)據(jù)平臺(tái),負(fù)責(zé)數(shù)據(jù)集成、任務(wù)調(diào)度及全流程開發(fā),保障高效運(yùn)行。結(jié)合 AI 技術(shù)優(yōu)化架構(gòu),引入智能調(diào)度算法提升資源利用率,推動(dòng)平臺(tái)向智能化演進(jìn),支撐業(yè)務(wù)數(shù)據(jù)需求。; 2、數(shù)據(jù)架構(gòu)設(shè)計(jì)與 AI 融合應(yīng)用:主導(dǎo)數(shù)據(jù)架構(gòu)規(guī)劃,制定存儲(chǔ)、處理及流通方案,確保與業(yè)務(wù)契合。運(yùn)用 AI 技術(shù)優(yōu)化數(shù)據(jù)建模,通過機(jī)器學(xué)習(xí)算法提升 ETL 效率與數(shù)據(jù)質(zhì)量,構(gòu)建適配 AI 場(chǎng)景的數(shù)據(jù)支撐體系; 3、實(shí)時(shí)計(jì)算與技術(shù)創(chuàng)新:運(yùn)用 Flink 實(shí)現(xiàn)海量數(shù)據(jù)離線與實(shí)時(shí)計(jì)算,解決數(shù)據(jù)傾斜等問題。關(guān)注 AI 與大數(shù)據(jù)融合技術(shù),評(píng)估并落地智能計(jì)算框架,優(yōu)化集群性能,降低成本,驅(qū)動(dòng)技術(shù)創(chuàng)新。 【任職要求】 1、專業(yè)背景與經(jīng)驗(yàn):5 年以上大數(shù)據(jù)工作經(jīng)驗(yàn),本科及以上學(xué)歷,相關(guān)專業(yè)優(yōu)先;熟悉 Dataworks 平臺(tái),具備大數(shù)據(jù)項(xiàng)目開發(fā)經(jīng)驗(yàn),有 AI 輔助數(shù)據(jù)處理或智能數(shù)據(jù)平臺(tái)搭建經(jīng)驗(yàn)者優(yōu)先。; 2、技術(shù)能力:精通數(shù)據(jù)倉庫建模與 ETL,深入理解 Flink 原理,能開發(fā)優(yōu)化計(jì)算任務(wù);掌握 AI 基礎(chǔ)算法,了解機(jī)器學(xué)習(xí)在數(shù)據(jù)處理中的應(yīng)用,可利用 AI 工具提升數(shù)據(jù)處理效能。; 3、綜合素養(yǎng):具備良好溝通與團(tuán)隊(duì)協(xié)作能力,邏輯清晰,問題解決能力強(qiáng);有較強(qiáng)自驅(qū)力與學(xué)習(xí)能力,能快速掌握 AI 與大數(shù)據(jù)融合新技術(shù),適應(yīng)新環(huán)境與業(yè)務(wù)需求。