崗位職責(zé):
1、根據(jù)項目需求對接大數(shù)據(jù)平臺,進行相應(yīng)的數(shù)據(jù)接入處理,包含數(shù)據(jù)的提取、存儲以及清洗處理等;
2、根據(jù)業(yè)務(wù)需求設(shè)計數(shù)據(jù)庫邏輯和物理模型, 開發(fā)數(shù)據(jù)庫生產(chǎn)環(huán)境所需要的存儲過程、函數(shù)、腳本等;
3、參與數(shù)據(jù)庫生產(chǎn)環(huán)境的問題優(yōu)化和解決。
任職要求:
1、掌握數(shù)據(jù)庫開發(fā)技術(shù):包含Oracle、Teradata、DB2、Mysql等,靈活運用SQL實現(xiàn)海量數(shù)據(jù)ETL加工處理;
2、熟悉Linux系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的文本處理和系統(tǒng)操作;
3、有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗,熟悉Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先,重點考察Hdfs、Mapreduce、Hive、Hbase;
4、熟練掌握一門或多門編程語言,并有大型項目建設(shè)經(jīng)驗者優(yōu)先,重點考察Java、Python、Perl;
5、熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理;
6、掌握實時流計算技術(shù),有storm開發(fā)經(jīng)驗者優(yōu)先;
7、認真負責(zé),有團隊協(xié)作精神,能夠與團隊相處融洽,協(xié)同處理好項目工作;
8、本科及以上學(xué)歷,計算機相關(guān)專業(yè)優(yōu)先。