職位描述
Python數(shù)據(jù)治理SparkHadoop
崗位職責(zé)：
1、核心職責(zé)聚焦于構(gòu)建可靠、高效、安全合規(guī)的AI數(shù)據(jù)基礎(chǔ)設(shè)施；
2、負(fù)責(zé)AI模型訓(xùn)練推理數(shù)據(jù)的全流程管理以及數(shù)據(jù)版本控制及質(zhì)量評(píng)估；
3、設(shè)計(jì)實(shí)現(xiàn)高吞吐、低延遲的數(shù)據(jù)提取、轉(zhuǎn)換和加載（ETL）流程，以支持模型訓(xùn)練和評(píng)估；使用工具或開(kāi)發(fā)自動(dòng)化工具/腳本（如Python）處理大規(guī)模數(shù)據(jù)，包括多源數(shù)據(jù)采集、噪聲過(guò)濾、去重、缺值補(bǔ)充、存儲(chǔ)、訪問(wèn)和加載等；
4、設(shè)計(jì)數(shù)據(jù)存儲(chǔ)架構(gòu)，包括數(shù)據(jù)庫(kù)選型（關(guān)系/非關(guān)系型、向量數(shù)據(jù)庫(kù)/時(shí)序數(shù)據(jù)庫(kù)）、數(shù)據(jù)表、存儲(chǔ)過(guò)程、訪問(wèn)控制、性能優(yōu)化、冗余備份等；
5、按需實(shí)施隱私計(jì)算（聯(lián)邦學(xué)習(xí)/差分隱私）及脫敏策略，確保訓(xùn)練數(shù)據(jù)符合GDPR/《個(gè)保法》要求；
6、按需構(gòu)建數(shù)據(jù)質(zhì)量監(jiān)控平臺(tái)，定義并自動(dòng)化校驗(yàn)數(shù)據(jù)完整性、一致性及分布偏移指標(biāo)（如PSI）。
任職要求：
1、計(jì)算機(jī)/統(tǒng)計(jì)學(xué)相關(guān)專(zhuān)業(yè)，2年以上數(shù)據(jù)工程經(jīng)驗(yàn)；
2、精通Python/SQL，熟練使用 PySpark/Pandas 進(jìn)行大規(guī)模數(shù)據(jù)處理；
3、具有編寫(xiě)自動(dòng)化工具、腳本或使用分布式計(jì)算工具/ETL工具（如Hadoop、Spark、Talend等）進(jìn)行數(shù)據(jù)ETL的能力與實(shí)際工程經(jīng)驗(yàn)；
4、具有設(shè)計(jì)數(shù)據(jù)存儲(chǔ)架構(gòu)的能力與實(shí)際工程經(jīng)驗(yàn)；
5、熟悉電力、氣象、光伏等領(lǐng)域和設(shè)備的數(shù)據(jù)處理、治理經(jīng)驗(yàn)者優(yōu)先；
6、熟悉GDPR/《個(gè)人信息保護(hù)法》/隱私計(jì)算/脫敏策略者優(yōu)先。
工作地點(diǎn)
成都成華區(qū)航微智慧能源裝備智能制造中心
相似職位
- 數(shù)據(jù)開(kāi)發(fā)工程師（ai大模型）8000-12000元
成都 - 武侯
深圳市法本信息技術(shù)股份有限公司 - 數(shù)據(jù)治開(kāi)發(fā)崗1.5-2萬(wàn)
成都 - 武侯
百川無(wú)憂信息科技(天津)有限公司 - 大數(shù)據(jù)工程師成都1.4-1.6萬(wàn)·13薪
成都 - 金牛
四川喵喔文化傳媒有限公司 - 報(bào)表開(kāi)發(fā)工程師9000-12000元
成都 - 邛崍
四川紫宸科技有限公司 - 數(shù)據(jù)開(kāi)發(fā)治理1.2-1.5萬(wàn)
成都 - 郫都
中鐵科學(xué)研究院集團(tuán)有限公司 - 成都-數(shù)據(jù)開(kāi)發(fā)1.1-1.9萬(wàn)
成都 - 雙流
敏捷艾科
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
陳先生/HR
當(dāng)前在線立即溝通
四川航電微能源有限公司四川航電微能源有限公司（簡(jiǎn)稱(chēng):航微能源），是全球一流的智慧能源系統(tǒng)科技企業(yè)。航微能源以技術(shù)為導(dǎo)向，以創(chuàng)新為驅(qū)動(dòng)；以電力電子技術(shù)為基礎(chǔ)、能源數(shù)字化技術(shù)為核心，集自主研發(fā)、制造、銷(xiāo)售、服務(wù)于一體，為源端、網(wǎng)端、終端電力等全鏈條行業(yè)客戶提供全系列儲(chǔ)能系統(tǒng)產(chǎn)品，及儲(chǔ)能系統(tǒng)一站式整體解決方案。航微能源是國(guó)家級(jí)高新技術(shù)企業(yè)、國(guó)家專(zhuān)精特新“小巨人”企業(yè)、四川省“瞪羚企業(yè)”、成都市新經(jīng)濟(jì)示范企業(yè)、成都市新經(jīng)濟(jì)雙百企業(yè)、成都市“五一勞動(dòng)獎(jiǎng)狀”企業(yè)。并先后榮膺“四川省重大技術(shù)裝備首臺(tái)(套)產(chǎn)品、“四川省電力電子科技成果一等獎(jiǎng)、三等獎(jiǎng)；創(chuàng)新人才一等獎(jiǎng)”、“SNEC2024儲(chǔ)能應(yīng)用卓越獎(jiǎng)”、“2024中國(guó)儲(chǔ)能系統(tǒng)企業(yè)20強(qiáng)”、“中國(guó)儲(chǔ)能產(chǎn)業(yè)最佳PCS供應(yīng)商獎(jiǎng)”等榮譽(yù)。公司業(yè)務(wù)遍布全球，涵蓋電力、交通、工商業(yè)、戶用等多個(gè)領(lǐng)域。在全球綠色能源變革的背景下，航微能源以“發(fā)現(xiàn)并創(chuàng)造一切綠色能源應(yīng)用場(chǎng)景”為使命，致力成為推動(dòng)各行業(yè)零碳轉(zhuǎn)型的重要力量，攜手全球伙伴共同構(gòu)建綠色智慧能源新時(shí)代。
公司主頁(yè)