崗位職責(zé):
1. 負責(zé)大數(shù)據(jù)中臺、無人云腦平臺的架構(gòu)設(shè)計、開發(fā)與優(yōu)化,確保平臺高效穩(wěn)定運行。
2. 利用 Hadoop、Hive、Hbase 等框架組件進行數(shù)據(jù)存儲、處理和分析。
3. 基于 Spark、Storm、Flink 等計算和數(shù)據(jù)處理引擎,開發(fā)數(shù)據(jù)處理和分析任務(wù)。
4. 使用 Kafka、RocketMQ 等消息隊列進行數(shù)據(jù)的實時傳輸和處理。
5. 運用 Java、Python 等語言進行代碼開發(fā),保證代碼質(zhì)量和工程實踐。
任職要求:
1. 本科及以上學(xué)歷(211/985 院校優(yōu)先),3年以上大數(shù)據(jù)開發(fā)經(jīng)驗。
2. 熟悉 Hadoop、Hive、Hbase、ELK 等框架組件。
3. 熟悉 Spark、Storm、Flink、Impala、Presto 等計算和數(shù)據(jù)處理引擎的環(huán)境搭建、開發(fā)和管理。
4. 熟悉消息隊列的原理,熟練使用 Kafka、RocketMQ 等常用的消息隊列。
5. 熟悉 Java、Python 等語言,編碼能力優(yōu)秀,有良好的編碼習(xí)慣和風(fēng)格,重視代碼質(zhì)量和工程實踐。