崗位職責:
1、負責各種資源數(shù)據(jù)的采集、清洗、存儲、分析流程;
2、負責大數(shù)據(jù)類產(chǎn)品的系統(tǒng)分析與架構(gòu)設計,配合產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;
3、承擔建設基于Hadoop/Flink生態(tài)的大數(shù)據(jù)離線/實時處理平臺;
4、參與數(shù)據(jù)中臺產(chǎn)品的系統(tǒng)設計及開發(fā)工作,參加及支持數(shù)據(jù)中臺運維工作;
5、跟進大數(shù)據(jù)前沿技術(shù)的發(fā)展,將合適的技術(shù)方案適時引入業(yè)務場景。
任職要求:
1、本科及以上學歷或研究生及以上學歷,計算機科學等相關(guān)專業(yè);
2、3年以上的大數(shù)據(jù)開發(fā)經(jīng)驗;
2、熟悉Hadoop、Hive、Hbase、ELK等框架組件;
3、熟悉Spark、Storm、Flink、Impala、Presto等計算和數(shù)據(jù)處理引擎的環(huán)境搭建、開發(fā)和管理;
4、熟悉消息隊列的原理,熟練使用Kafka、rocketmq等常用的消息隊列;
5、熟悉java、python等語言,編碼能力優(yōu)秀,有良好的編碼習慣和風格,重視代碼質(zhì)量和工程實踐