大數(shù)據(jù)組件cdh,spark,oozie等熟練要熟練 大數(shù)據(jù)簡(jiǎn)歷重點(diǎn)是spark開發(fā)和CDH搭建相關(guān)經(jīng)驗(yàn)簡(jiǎn)歷體現(xiàn)大數(shù)據(jù)平臺(tái)的搭建經(jīng)驗(yàn)
1. 日常模塊開發(fā)工作,理解業(yè)務(wù)需求,并參與模塊的設(shè)計(jì)及開發(fā);
2. 根據(jù)需求完成基于關(guān)系型數(shù)據(jù)庫(kù)或數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)挖掘與分析工作,編寫流計(jì)算腳本進(jìn)行數(shù)據(jù)統(tǒng)計(jì)分析;
3. 負(fù)責(zé)大數(shù)據(jù)環(huán)境的組件管理,指導(dǎo)運(yùn)維人員進(jìn)行大數(shù)據(jù)環(huán)境部署和維護(hù);
4. 緊跟前沿技術(shù)并定期交流培訓(xùn),積極嘗試新技術(shù)在應(yīng)用上的探索;
任職要求:
1. 具備扎實(shí)的計(jì)算機(jī)理論基礎(chǔ),對(duì)數(shù)據(jù)結(jié)構(gòu)及算法有較強(qiáng)的功底;
2. 熟悉Java,熟悉JVM,具備優(yōu)秀的系統(tǒng)問(wèn)題追查和性能調(diào)節(jié)優(yōu)化能力,熟悉常見的面向?qū)ο笤O(shè)計(jì)模式,熟悉springcloud架構(gòu)體系應(yīng)用的開發(fā),熟悉mysql數(shù)據(jù)庫(kù)的設(shè)計(jì)和使用,熟悉redis、mq等常用中間件的使用;
3. 熟悉Hadoop,hive,HBase,Kafka,Spark,ES,F(xiàn)link 等開發(fā)技術(shù),熟練掌握ES、hive/HBase、Spark的數(shù)據(jù)開發(fā)應(yīng)用;
4. 熟練掌握LINUX常規(guī)命令與工具,熟悉CDH(Cloudera Distribution Hadoop)平臺(tái)的搭建和使用者優(yōu)先;
職位福利:五險(xiǎn)一金、餐補(bǔ)、帶薪年假