崗位職責:
1、負責大數據PaaS平臺組件部署、大數據數據中臺及應用產品布署及日常維護(包括部署、升級、擴容、遷移、排障等),熟悉hadoop、HBase、spark、Hive、Flink、kafka、Kerberos、Ranger、Elasticsearch、Redis等組件的技術原理和組件的配置及使用,有精通部分組件使用可優(yōu)先考慮;
2、使用prometheus、grafana進行集群監(jiān)控部署;
3、負責K8s/Docker等容器化工具及doris運維和布署;
4、負責大數據平臺相關組件、產品的巡檢、故障排除、數據備份等業(yè)務,保證平臺及產品高效、穩(wěn)定運行;
5、負責大數據平臺的安全漏洞加固及缺陷修復;
6、負責大數據平臺運維相關技術文檔的整理和維護;
7、配合完成大數據平臺的方案編制、容量規(guī)劃,根據需求完成組件及產品升級。
【任職要求】
1、本科及以上學歷,5年及以上大數據運維工作經驗,有電信行業(yè)大數據平臺維護經驗優(yōu)先;
2、熟悉大數據平臺相關技術,掌握python/shell等語言佳;
3、了解大數據平臺架構,具備常見問題的基本分析和解決能力,熟悉Haodop集群架構及原理;
4、能夠進行Linux操作系統的配置、管理及優(yōu)化,能夠獨立排查及解決操作系統層面的問題;
5、具備K8s/Docker等容器化布署經驗優(yōu)先,熟悉通過LVS/Keepalived/Nginx/Haproxy技術實現負載均衡;
6、熟悉Java,有Java項目開發(fā)經驗尤佳,有大數據后端開發(fā)經驗優(yōu)先考慮;
7、做事認真負責,自學能力較強,有較強的書面與口頭溝通表達能力,獨立分析、解決問題的能力。
8、積極的處事心態(tài)和較強的抗壓能力。