国产中文无码av每日更新在线观看, 亚洲天堂中文字幕一区二区三区免费, 国产口爆吞精在线观视频-黄色国产, 92福利-国内精品久久久久久99,亚洲成AV人A片不卡无码,浪潮AV无码专区,老熟女败火白浆,中文字幕日产av,色情日本免费看大片

更新于 7月24日

大數(shù)據(jù)工程師

8000-15000元
  • 蕪湖鳩江區(qū)
  • 3-5年
  • 本科
  • 全職
  • 招5人

職位描述

HadoopSparkFlinkJavaPythonScala
1.大數(shù)據(jù) ETL 開(kāi)發(fā)與維護(hù)
(1)負(fù)責(zé)數(shù)據(jù)中臺(tái)的 ETL 流程設(shè)計(jì)、開(kāi)發(fā)、調(diào)度與優(yōu)化,包括數(shù)據(jù)抽?。◤臉I(yè)務(wù)庫(kù)、日志、第三方接口等數(shù)據(jù)源獲取數(shù)據(jù))、清洗(處理臟數(shù)據(jù)、缺失值、重復(fù)值)、轉(zhuǎn)換(格式轉(zhuǎn)換、關(guān)聯(lián)計(jì)算、聚合等)、加載(寫(xiě)入數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖等目標(biāo)存儲(chǔ))。
(2)設(shè)計(jì) ETL 調(diào)度策略,監(jiān)控任務(wù)運(yùn)行狀態(tài),解決數(shù)據(jù)延遲、任務(wù)失敗等問(wèn)題,保障數(shù)據(jù)鏈路的穩(wěn)定性與高效性。
2.數(shù)據(jù)倉(cāng)庫(kù)(數(shù)倉(cāng))建設(shè)與管理
(1)基于業(yè)務(wù)需求和數(shù)據(jù)中臺(tái)架構(gòu),設(shè)計(jì)數(shù)倉(cāng)分層模型(如 ODS、DWD、DWS、ADS 層),定義數(shù)據(jù)實(shí)體、維度、指標(biāo)及關(guān)系,確保數(shù)據(jù)模型的規(guī)范性、可擴(kuò)展性。
(2)負(fù)責(zé)數(shù)倉(cāng)表結(jié)構(gòu)設(shè)計(jì)、索引優(yōu)化、存儲(chǔ)策略制定,提升數(shù)據(jù)查詢與計(jì)算效率,支撐業(yè)務(wù)分析和數(shù)據(jù)應(yīng)用。
3.數(shù)據(jù)治理實(shí)施
(1)參與數(shù)據(jù)中臺(tái)的數(shù)據(jù)治理體系建設(shè),包括數(shù)據(jù)標(biāo)準(zhǔn)(定義核心數(shù)據(jù)資產(chǎn)的命名、格式、含義)、數(shù)據(jù)質(zhì)量(設(shè)計(jì)質(zhì)量規(guī)則,監(jiān)控?cái)?shù)據(jù)完整性、準(zhǔn)確性、一致性,推動(dòng)問(wèn)題整改)、數(shù)據(jù)安全(敏感數(shù)據(jù)脫敏、訪問(wèn)權(quán)限控制)、元數(shù)據(jù)管理(梳理數(shù)據(jù)血緣、資產(chǎn)目錄,提升數(shù)據(jù)可理解性)。
(2)制定數(shù)據(jù)治理流程規(guī)范,協(xié)調(diào)業(yè)務(wù)與技術(shù)團(tuán)隊(duì)落地執(zhí)行,持續(xù)優(yōu)化數(shù)據(jù)資產(chǎn)質(zhì)量。
4.數(shù)據(jù)標(biāo)簽體系與用戶畫(huà)像構(gòu)建
(1)基于業(yè)務(wù)場(chǎng)景(如用戶運(yùn)營(yíng)、精準(zhǔn)營(yíng)銷)設(shè)計(jì)數(shù)據(jù)標(biāo)簽體系,包括標(biāo)簽層級(jí)(基礎(chǔ)標(biāo)簽、衍生標(biāo)簽、預(yù)測(cè)標(biāo)簽)、計(jì)算邏輯(如用戶活躍度、消費(fèi)能力標(biāo)簽),并開(kāi)發(fā)標(biāo)簽計(jì)算腳本。
(2)維護(hù)標(biāo)簽數(shù)據(jù)的更新機(jī)制,確保標(biāo)簽時(shí)效性,支撐用戶畫(huà)像、分群分析等數(shù)據(jù)應(yīng)用。
5.數(shù)據(jù)指標(biāo)體系搭建與監(jiān)控
(1)參與業(yè)務(wù)指標(biāo)體系(如核心業(yè)務(wù) KPI、運(yùn)營(yíng)指標(biāo)、監(jiān)控指標(biāo))的設(shè)計(jì)與定義,將指標(biāo)拆解為可計(jì)算的原子指標(biāo)、派生指標(biāo),形成標(biāo)準(zhǔn)化指標(biāo)庫(kù)。
(2)開(kāi)發(fā)指標(biāo)計(jì)算模型,通過(guò)數(shù)據(jù)中臺(tái)工具實(shí)現(xiàn)指標(biāo)的自動(dòng)化計(jì)算、實(shí)時(shí) / 離線更新,并對(duì)接數(shù)據(jù)看板,支撐業(yè)務(wù)監(jiān)控與決策。
任職要求:
1.本科及以上學(xué)歷,計(jì)算機(jī)、大數(shù)據(jù)、統(tǒng)計(jì)學(xué)等相關(guān)專業(yè)優(yōu)先;
2.熟練掌握 Hadoop、Spark、Flink 等大數(shù)據(jù)計(jì)算框架,Hive、HBase、ClickHouse、MySQL 等數(shù)據(jù)存儲(chǔ)技術(shù),能獨(dú)立開(kāi)發(fā) ETL 任務(wù);
3.精通 SQL,熟悉 Python/Scala/Java 等編程語(yǔ)言,具備復(fù)雜數(shù)據(jù)處理邏輯的編碼能力;
4.了解數(shù)據(jù)倉(cāng)庫(kù)建模理論(如星型模型、雪花模型)、維度建模方法,有實(shí)際數(shù)倉(cāng)建設(shè)經(jīng)驗(yàn);
5.熟悉數(shù)據(jù)治理工具(如元數(shù)據(jù)管理平臺(tái)、數(shù)據(jù)質(zhì)量監(jiān)控工具)或相關(guān)方法論者優(yōu)先;
6.具備數(shù)據(jù)中臺(tái)或大型數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn),能理解業(yè)務(wù)場(chǎng)景并將其轉(zhuǎn)化為數(shù)據(jù)模型、指標(biāo)或標(biāo)簽體系;
7.具備較強(qiáng)的問(wèn)題分析與解決能力、跨團(tuán)隊(duì)溝通能力,有項(xiàng)目管理或復(fù)雜流程協(xié)調(diào)經(jīng)驗(yàn)者優(yōu)先。
加分項(xiàng):
有用戶標(biāo)簽體系、畫(huà)像系統(tǒng)、指標(biāo)平臺(tái)搭建經(jīng)驗(yàn).

工作地點(diǎn)

蕪湖鳩江區(qū)瑞祥路與清風(fēng)路交叉口東北200米

職位發(fā)布者

劉女士/人事經(jīng)理

三日內(nèi)活躍
立即溝通
公司Logo安徽中充服物聯(lián)網(wǎng)科技有限公司
中充服致力于成為充電服務(wù)整體解決方案提供商,在智能充電領(lǐng)域全面開(kāi)拓。目前在智能物聯(lián)網(wǎng)管控平臺(tái)(中充服物聯(lián)網(wǎng)科技)開(kāi)發(fā),智能自助設(shè)備研發(fā)、生產(chǎn),設(shè)備銷售、安裝、運(yùn)維(等方面擁有全面解決方案和資源。平臺(tái)通過(guò)開(kāi)放API和系列化Agent可實(shí)現(xiàn)與上下游產(chǎn)品功能無(wú)縫連接,實(shí)現(xiàn)無(wú)人管理、遠(yuǎn)程控制、數(shù)據(jù)上傳、人機(jī)互動(dòng)以及設(shè)備運(yùn)行狀況實(shí)時(shí)監(jiān)控等操作,為客戶提供一對(duì)一高價(jià)值行業(yè)內(nèi)容和服務(wù)。公司自建研發(fā)中心、研發(fā)團(tuán)隊(duì),具備物聯(lián)網(wǎng)平臺(tái)研發(fā)創(chuàng)新能力。與安徽工程大學(xué)、安徽信息工程學(xué)院合作,設(shè)立產(chǎn)學(xué)研基地。公司為中國(guó)電信、中國(guó)鐵塔、中國(guó)移動(dòng)、中國(guó)廣電等央企和地方政府實(shí)業(yè)單位提供物聯(lián)網(wǎng)平臺(tái)服務(wù),同時(shí)滿足客戶個(gè)性化的研發(fā)定制需求。
公司主頁(yè)