崗位職責(zé):
1.參與大數(shù)據(jù)平臺架構(gòu)設(shè)計和開發(fā),構(gòu)建高效、可靠的數(shù)據(jù)處理管道。負責(zé)數(shù)據(jù)倉庫、數(shù)據(jù)湖等數(shù)據(jù)平臺的搭建、維護和優(yōu)化。設(shè)計和開發(fā)ETL/ELT流程,進行數(shù)據(jù)清洗、轉(zhuǎn)換和加載。
編寫高效、可維護的SQL代碼,進行數(shù)據(jù)查詢和分析。
2.與數(shù)據(jù)架構(gòu)師和業(yè)務(wù)團隊合作,理解數(shù)據(jù)需求并提供數(shù)據(jù)解決方案。監(jiān)控數(shù)據(jù)平臺性能,識別和解決性能瓶頸。
3.研究和探索新的數(shù)據(jù)技術(shù)和工具,不斷提升數(shù)據(jù)平臺能力。
任職要求:
1.具備本科及以上學(xué)歷,計算機科學(xué)、軟件工程或相關(guān)專業(yè),5年以上數(shù)據(jù)開發(fā)經(jīng)驗。
2.精通SQL語言,熟悉至少一種主流數(shù)據(jù)庫(如MySQL、Oracle、PostgreSQL等),熟悉Hadoop生態(tài)系統(tǒng)(如HDFS、Hive、Spark等),并具備實際項目經(jīng)驗。熟悉數(shù)據(jù)倉庫建模理論,具備數(shù)據(jù)倉庫設(shè)計和開發(fā)經(jīng)驗,熟悉ETL/ELT工具(如Informatica、DataStage、Kettle等),并具備實際項目經(jīng)驗。
3.具備良好的編程能力,熟悉至少一種編程語言(如Python、Java、Scala等),具備良好的溝通能力和團隊合作精神,能夠獨立解決問題。