1、負責項目軟件的設計和開發(fā),負責Hadoop的開發(fā)工作。
2、參與智能風控建模工作,負責數(shù)據(jù)分析與處理、數(shù)據(jù)統(tǒng)計、數(shù)據(jù)挖掘。
3、能夠完成項目相關模塊的分析、編碼及開發(fā)代碼的單元測試。
4、負責系統(tǒng)性能優(yōu)化,監(jiān)控和調整集群資源利用率,識別和解決數(shù)據(jù)處理過程中的性能瓶頸。
職位要求:
1.掌握Spark、Hive、Hadoop等技術并具有相關開發(fā)經驗。
2.熟悉PostgreSQL、MySQL等關系型數(shù)據(jù)庫,有較強的SQL能力。
3.熟悉主流分布式數(shù)據(jù)庫、緩存、文件系統(tǒng)、消息系統(tǒng)等技術,有l(wèi)inux經驗。