主要負責大數(shù)據平臺數(shù)據體系遷移工程建設,包括批量作業(yè)、腳本、工具等研發(fā)。(1)工作年限方面:本科及以上畢業(yè),至少有3年項目開發(fā)經驗。
(2)開發(fā)技能方面:
1、熟練掌握大數(shù)據開發(fā)技術棧,包括Hadoop、Hive、Spark、Flink等,了解常見大數(shù)據存儲與計算分析相關組件的內部原理,有實際項目經驗優(yōu)先。
2、能熟練使用python、per1、shell,進行腳本開發(fā)。
3、熟練掌握SQL的使用,具有SQL、hive性能優(yōu)化經驗。
4、熟悉 hive、mysq1、guassb等數(shù)據庫技術,有實際項目開發(fā)經歷,了解ETL流程。
(3)個人素質方面:
做事認真,性格開朗,責任心強,積極主動,勇于擔當,熱愛編碼工作,有比較強大學習能力和獨立工作能力,理解能力強,善于表達和溝通,