崗位要求:
1.熟練掌握CDP各組件、Spark、Tez、 StarRocks、MySQL,熟練進(jìn)行數(shù)據(jù)倉庫開發(fā)
2.熟悉Hadoop、HBase等分布式計(jì)算平臺開發(fā),3年以上hadoop使用經(jīng)驗(yàn),有大數(shù)據(jù)應(yīng)用系統(tǒng)開發(fā)經(jīng)驗(yàn)
3.熟悉Kettle 等ETL 工具的使用和開發(fā);具有一定數(shù)據(jù)模型和數(shù)據(jù)架構(gòu)基礎(chǔ),熟悉hadoop\hive和常用數(shù)據(jù)庫
4.熟悉SQL/HQL,有較好的SQL性能調(diào)優(yōu)經(jīng)驗(yàn);熟悉hive sql的開發(fā)
5.熟悉ETL設(shè)計(jì)、調(diào)度、監(jiān)控、算法等,能夠熟練的進(jìn)行事實(shí)表、維度表的開發(fā)
6.有一定的分布式開發(fā)經(jīng)驗(yàn),使用HBase進(jìn)行過2項(xiàng)目開發(fā)、或支撐過HBase高并發(fā)項(xiàng)目的系統(tǒng)工程師優(yōu)先
7.計(jì)算機(jī)相關(guān)專業(yè)優(yōu)先