職位描述
數(shù)據(jù)庫(kù)開(kāi)發(fā)數(shù)據(jù)倉(cāng)庫(kù)云計(jì)算/大數(shù)據(jù)
職責(zé)：
- 負(fù)責(zé)自研湖倉(cāng)一體平臺(tái)的總體設(shè)計(jì)與技術(shù)選型，構(gòu)建統(tǒng)一的數(shù)據(jù)采集、存儲(chǔ)、計(jì)算、查詢與治理體系。
- 規(guī)劃批流一體的數(shù)據(jù)處理架構(gòu)：實(shí)時(shí)流處理可優(yōu)先考慮 Apache Flink，其核心是真實(shí)流處理模型，能在數(shù)據(jù)到達(dá)時(shí)即時(shí)處理并提供嚴(yán)格的一次語(yǔ)義，適合低延遲場(chǎng)景 ；批處理可結(jié)合 Spark 等框架，采用云平臺(tái)或 K8S 集群部署。
- 設(shè)計(jì)和推進(jìn)數(shù)據(jù)模型（標(biāo)簽體系、領(lǐng)域模型），制定 ODS、DWD、DWS、ADS 分層策略，保證數(shù)據(jù)血緣、數(shù)據(jù)質(zhì)量與數(shù)據(jù)資產(chǎn)目錄。
- 建設(shè)統(tǒng)一的元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量監(jiān)控和安全治理體系，確保數(shù)據(jù)隱私與合規(guī)性。
- 帶領(lǐng)團(tuán)隊(duì)完成需求拆解、任務(wù)分配、代碼審核、上線和運(yùn)維，協(xié)調(diào)與業(yè)務(wù)、算法團(tuán)隊(duì)的接口。
- 計(jì)算機(jī)或相關(guān)專(zhuān)業(yè)本科及以上學(xué)歷，3 年以上大數(shù)據(jù)平臺(tái)設(shè)計(jì)與開(kāi)發(fā)經(jīng)驗(yàn)；具備交通/工業(yè)領(lǐng)域經(jīng)驗(yàn)更佳。
- 精通湖倉(cāng)架構(gòu)設(shè)計(jì)，熟悉 Apache Spark、Flink、Kafka 等生態(tài)，了解 Iceberg/Delta/Hudi 等開(kāi)源表格式；能夠根據(jù)業(yè)務(wù)選擇合適的開(kāi)源技術(shù)搭建批流一體平臺(tái)。
- 熟悉 SQL、Python/Scala/Java，掌握 ETL/ELT 策略和數(shù)據(jù)建模方法（星型/雪花模型），能構(gòu)建從 ODS 到 ADS 的全鏈路數(shù)倉(cāng)。
- 理解數(shù)據(jù)治理、元數(shù)據(jù)管理和數(shù)據(jù)安全，熟悉 Apache Atlas、AWS Glue Data Catalog 等數(shù)據(jù)目錄工具；能夠設(shè)計(jì)數(shù)據(jù)血緣和數(shù)據(jù)資產(chǎn)目錄，確保合規(guī)與安全 。
- 具有團(tuán)隊(duì)管理和項(xiàng)目管理經(jīng)驗(yàn)，能夠帶領(lǐng) 3–5 人的團(tuán)隊(duì)，協(xié)調(diào)多個(gè)項(xiàng)目并推動(dòng)上線。
工作地點(diǎn)
石家莊裕華區(qū)環(huán)球智匯中心-C座西塔23樓
相似職位
- 技術(shù)工程師8000-13000元
石家莊 - 新華
河北天糧餐飲管理集團(tuán)有限公司 - 大數(shù)據(jù)平臺(tái)主管1-1.2萬(wàn)
石家莊 - 裕華
河北鵬鵠信息科技有限公司 - 數(shù)據(jù)治理工程師6000-10000元
石家莊 - 新華
河北昂德商貿(mào)有限公司
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
韓先生/數(shù)智中心
當(dāng)前在線立即溝通
河北鵬鵠信息科技有限公司河北鵬鵠信息科技有限公司（以下簡(jiǎn)稱(chēng)“公司”）創(chuàng)立于2021年9月30日，公司作為河北省內(nèi)首家專(zhuān)注于人工智能技術(shù)賦能智慧交通領(lǐng)域的創(chuàng)新型科研單位，依托自身專(zhuān)注于AI、大數(shù)據(jù)治理、物聯(lián)網(wǎng)技術(shù)領(lǐng)域不斷深耕，同時(shí)基于自有國(guó)際化前沿團(tuán)隊(duì)先進(jìn)的研發(fā)、應(yīng)用能力優(yōu)勢(shì)及多項(xiàng)技術(shù)專(zhuān)利加持，根植于交通運(yùn)輸行業(yè)，尤其是針對(duì)省內(nèi)各級(jí)高速路、國(guó)省干線及農(nóng)村公路的“建、管、養(yǎng)、運(yùn)”全流程工作環(huán)節(jié)，不斷予以“信息化”、“智慧化”的深層次、多維度賦能。公司自創(chuàng)建以來(lái)，一直堅(jiān)持“輕量化智慧交通”的產(chǎn)品研發(fā)、應(yīng)用理念，緊緊圍繞國(guó)家“十四五規(guī)劃建設(shè)綱要”及“交通強(qiáng)國(guó)建設(shè)綱要”等國(guó)家政策文件對(duì)智慧交通領(lǐng)域的相關(guān)提升要求，堅(jiān)持問(wèn)題導(dǎo)向，不斷因地制宜，提供定制化服務(wù)，利用人工智能賦能傳統(tǒng)道路機(jī)電設(shè)備，模擬人腦的發(fā)現(xiàn)、思維過(guò)程，極大降低人為誤判干擾，提升各級(jí)無(wú)人值守能力，使其實(shí)現(xiàn)大幅智慧化提升；同時(shí)利用行業(yè)領(lǐng)先的數(shù)據(jù)融合技術(shù)，極大降低智能化硬件設(shè)備的投入及管控系統(tǒng)平臺(tái)的重復(fù)建設(shè)，大大降低客戶智慧化提升的各項(xiàng)投入成本，為河北省內(nèi)各級(jí)道路管養(yǎng)部門(mén)及企業(yè)提供了各類(lèi)有針對(duì)性的“精細(xì)化”、“模塊化”智慧交通提升方案，其中“長(zhǎng)大橋隧智慧管理平臺(tái)”、“交通大腦系統(tǒng)”及“數(shù)據(jù)中樞系統(tǒng)”等產(chǎn)品已在省內(nèi)各級(jí)地市縣級(jí)道路管養(yǎng)部門(mén)進(jìn)行成功布設(shè)搭建，并獲得各級(jí)客戶的高度認(rèn)可，為省內(nèi)各級(jí)道路的智能化提升工作做出卓越貢獻(xiàn)。
公司主頁(yè)