崗位職責:
1. 負責系統中大數據平臺數據處理工具、流處理平臺等建設,功能規(guī)劃,平臺演進,維護調優(yōu)等;
2.結合AMI的業(yè)務特征,負責系統數據倉庫規(guī)劃、數據倉庫建設、數倉管理等;
3.負責系統中大數據處理的程序開發(fā);
4.對部門人員進行大數據平臺,處理工具及開發(fā)培訓;
5.負責大數據處理技術研究及新技術引進,參與超大規(guī)模實時/離線數據計算框架,存儲、查詢、可視化解決方案的設計、研發(fā);
6.制定大數據程序開發(fā)規(guī)范。
任職要求:
1.本科及以上學歷,計算機科學、軟件工程等相關專業(yè)。同時,需要具備3-5年或以上的相關工作經驗,最好有同行業(yè)經驗;
2.負責處理和分析大量數據,包括數據采集、清洗、轉換和存儲。熟練各種工具和技術,如Hadoop、Spark、Kafka等,來處理和存儲PB級的數據?;
3.參與大數據系統的設計和開發(fā)工作,包括數據倉庫的架構設計、模型設計和處理性能調優(yōu)等。精通數據建模和數據處理流程,能夠設計高效的數據架構,并確保其穩(wěn)定性和擴展性?;
4.熟練掌握Java、Python、Scala等編程語言,具備基于這些語言的數據處理和開發(fā)能力?。