崗位職責:
1、分析客戶業(yè)務場景,設計定制化數(shù)據(jù)治理框架,制定數(shù)據(jù)標準、主數(shù)據(jù)管理策略及數(shù)據(jù)質(zhì)量規(guī)則。
2、主導公司數(shù)據(jù)治理平臺產(chǎn)品的部署、配置和集成,打通客戶業(yè)務系統(tǒng)數(shù)據(jù)孤島。
3、完成平臺安裝、測試及上線,展示數(shù)據(jù)治理成果(如數(shù)據(jù)資產(chǎn)目錄、血緣分析報告)。
4、優(yōu)化平臺性能,提升數(shù)據(jù)處理效率,支持客戶實時數(shù)據(jù)分析需求。
5、設計數(shù)據(jù)從采集到銷毀的全周期策略,建立客戶數(shù)據(jù)資產(chǎn)目錄并跟蹤血緣關系。
6、實施數(shù)據(jù)清洗、標準化及脫敏操作,修復歷史數(shù)據(jù)質(zhì)量問題(如重復記錄、字段缺失)。
7、協(xié)調(diào)客戶IT、業(yè)務部門推進治理落地,向非技術人員傳遞治理價值(如降本增效、合規(guī)風控)。
8、組織數(shù)據(jù)治理培訓,提升客戶數(shù)據(jù)意識及平臺操作能力。
9、確??蛻魯?shù)據(jù)符合GDPR等法規(guī),設計數(shù)據(jù)安全策略(訪問控制、加密)并執(zhí)行審計。
任職要求:
1、熟練使用數(shù)據(jù)治理平臺完成數(shù)據(jù)采集、數(shù)據(jù)治理、數(shù)據(jù)開發(fā)、數(shù)據(jù)共享交換、數(shù)據(jù)安全等工作;
2、熟悉數(shù)據(jù)倉庫設計理論,掌握ODS、STD、DWD、DM分層設計方法,獨立建設主題庫、專題庫;
3、掌握數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量、元數(shù)據(jù)、數(shù)據(jù)模型、數(shù)據(jù)血緣等數(shù)據(jù)治理相關實戰(zhàn)知識;
4、了解數(shù)據(jù)治理需求分析、數(shù)據(jù)建模、數(shù)據(jù)開發(fā);
5、了解多項大數(shù)據(jù)處理/分析相關的工具/框架,如Hadoop、Hive、Spark、kafka、HBase、Presto等;
6、熟練ETL數(shù)據(jù)清洗流程,熟悉ETL開發(fā)工具與平臺,能基于數(shù)據(jù)治理平臺開展數(shù)據(jù)ETL工作;
7、熟練使用Spark、Flink計算引擎開發(fā)離線作業(yè)和實時作業(yè);
8、熟練使用平臺開發(fā)API接口服務;
9、掌握數(shù)據(jù)安全分級分類、數(shù)據(jù)加密、數(shù)據(jù)脫敏、敏感數(shù)據(jù)識別等技能;
10、掌握數(shù)據(jù)可視化工具的使用,基于平臺配置數(shù)據(jù)源、數(shù)據(jù)集、儀表盤和數(shù)據(jù)大屏;