職位描述
數(shù)據(jù)建模數(shù)據(jù)倉庫數(shù)據(jù)庫開發(fā)SparkHadoopKafka
崗位職責(zé):
1.設(shè)計(jì)并實(shí)施大數(shù)據(jù)處理和分析策略，確保數(shù)據(jù)質(zhì)量和精準(zhǔn)度。
2.與團(tuán)隊(duì)合作,優(yōu)化數(shù)據(jù)處理流程,提高數(shù)據(jù)效率。
3.參與大數(shù)據(jù)項(xiàng)目的規(guī)劃和執(zhí)行，協(xié)助解決技術(shù)難題。
4.與架構(gòu)師對齊長期目標(biāo)，作為技術(shù)中堅(jiān)，負(fù)責(zé)設(shè)計(jì)分布式數(shù)據(jù)倉庫(如Hive/Iceberg)和數(shù)據(jù)湖架構(gòu)，規(guī)劃數(shù)據(jù)流向(采集→存儲→計(jì)算→服務(wù))
5.主導(dǎo)數(shù)據(jù)清洗、轉(zhuǎn)換、加載流程，使用Spark/ Flink構(gòu)建高效作業(yè)，優(yōu)化資源分配
6.監(jiān)控?cái)?shù)據(jù)處理活動，確保遵守相關(guān)法律法規(guī)和標(biāo)準(zhǔn)。
任職要求:
1.具備扎實(shí)的大數(shù)據(jù)處理和分析能力，熟悉數(shù)據(jù)處理工具和語言。
2.具有良好的問題解決能力，能夠獨(dú)立處理和解決技術(shù)問題。
3.技術(shù)棧
①精通Java編程語言
②大數(shù)據(jù)工具鏈：Spark/Hadoop/Kafka/Hive,熟悉數(shù)據(jù)湖(Delta/Iceberg)
4.開發(fā)能力
①設(shè)計(jì)ETL流程(如Kafka→Spark→Hive)
②SQL優(yōu)化(復(fù)雜查詢調(diào)優(yōu)，Hive/Presto)
③Spark作業(yè)優(yōu)化(數(shù)據(jù)傾斜處理、資源分配)
5.數(shù)據(jù)經(jīng)驗(yàn)
①大規(guī)模數(shù)據(jù)處理：參與TB-PB級項(xiàng)目（如日志清洗、用戶行為分析）
②數(shù)據(jù)質(zhì)量保障：設(shè)計(jì)校驗(yàn)規(guī)則、處理臟數(shù)據(jù)
③主導(dǎo)過千萬級DAU用戶數(shù)據(jù)處理
工作地點(diǎn)
武進(jìn)區(qū)常州科教城創(chuàng)研港-1號樓
相似職位
查看更多相似職位
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
王女士/招聘專員
三日內(nèi)活躍立即溝通
蘇文電能科技股份有限公司蘇文電能，成立于 2007年 4月，注冊資本 10523.87萬元，是集設(shè)計(jì)咨詢（E）、設(shè)備服務(wù)（P）、安裝建設(shè)（C）以及智能運(yùn)維（O）為一體的國家級高新技術(shù)企業(yè)，為用戶提供一站式（EPCO）供用電服務(wù)，讓用電更安全，更省心！蘇文電能具備電力工程建設(shè)全過程技術(shù)咨詢資質(zhì)；新能源發(fā)電、送電工程、變電工程、建筑智能化設(shè)計(jì)資質(zhì);電力工程總承包資質(zhì);承裝(修、試)電力設(shè)施許可證和安全生產(chǎn)許可證;通過了中電聯(lián) ISO9001質(zhì)量管理體系認(rèn)證、ISO14001環(huán)境管理體系認(rèn)證及 OHSAS18001職業(yè)健康安全管理體系認(rèn)證，是國家級“守合同重信用”企業(yè);智能化變電站監(jiān)管數(shù)據(jù)中心系統(tǒng)名列國家工信部電力需求側(cè)管理系統(tǒng)名錄，江蘇省企業(yè)技術(shù)中心，江蘇省工程技術(shù)研究中心。蘇文電能擁有 10多年的實(shí)戰(zhàn)積累，服務(wù)了上千個(gè)工業(yè)企業(yè)、商業(yè)綜合體、高保障用電(數(shù)據(jù)中心,公共設(shè)施、地鐵)、電網(wǎng)建設(shè)、居配等項(xiàng)目的咨詢、設(shè)計(jì)、設(shè)備、施工、管理和運(yùn)維。電能，成立于 2007年 4月，注冊資本 10523.87萬元，是集設(shè)計(jì)咨詢（E）、設(shè)備服務(wù)（P）、安裝建設(shè)（C）以及智能運(yùn)維（O）為一體的國家級高新技術(shù)企業(yè)，為用戶提供一站式（EPCO）供用電服務(wù)，讓用電更安全，更省心！蘇文電能具備電力工程建設(shè)全過程技術(shù)咨詢資質(zhì)；新能源發(fā)電、送電工程、變電工程、建筑智能化設(shè)計(jì)資質(zhì);電力工程總承包資質(zhì);承裝(修、試)電力設(shè)施許可證和安全生產(chǎn)許可證;通過了中電聯(lián) ISO9001質(zhì)量管理體系認(rèn)證、ISO14001環(huán)境管理體系認(rèn)證及 OHSAS18001職業(yè)健康安全管理體系認(rèn)證，是國家級“守合同重信用”企業(yè);智能化變電站監(jiān)管數(shù)據(jù)中心系統(tǒng)名列國家工信部電力需求側(cè)管理系統(tǒng)名錄，江蘇省企業(yè)技術(shù)中心，江蘇省工程技術(shù)研究中心。蘇文電能擁有 10多年的實(shí)戰(zhàn)積累，服務(wù)了上千個(gè)工業(yè)企業(yè)、商業(yè)綜合體、高保障用電(數(shù)據(jù)中心,公共設(shè)施、地鐵)、電網(wǎng)建設(shè)、居配等項(xiàng)目的咨詢、設(shè)計(jì)、設(shè)備、施工、管理和運(yùn)維。
公司主頁