職位描述
數據建模HadoopHbaseSqlFlinkSTARROCKSDORISETL數據治理JavaPythonhive
崗位職責：
1. 負責數據任務開發(fā)，熟悉Hadoop/Spark基礎組件(HDFS/YARN/MapReduce)的核心功能。
2. 精通復雜的HiveSQL任務，并能優(yōu)化Hive SQL執(zhí)行效率(分區(qū)裁剪、謂詞下推)。
3. 熟練開發(fā)Spark批處理任務，理解RDD/DataFrame執(zhí)行原理，能優(yōu)化Shuffle、內存配置。
4. 熟練構建星型/雪花模型，根據業(yè)務場景設計數據模型。
5. 使用ETL工具(如Kettle)完成數據加工和處理，支持業(yè)務部門數據需求。
6. 設計多源異構數據集成方案(如API、日志文件、數據庫混合接入)，解決數據一性沖突。
7. 能根據業(yè)務需求，設計多維度、多指標的復雜報表，熟悉ClickHouse/DorisDB集群部署與查詢優(yōu)化。
8. 開發(fā)數據質量監(jiān)控腳本，識別異常數據并推動業(yè)務方修復。
9. 使用Python/Java開發(fā)數據服務，培訓業(yè)務人員使用自助分析工具。
崗位要求：
1. 深入理解相關領域的基本業(yè)務概念和流程，能獨立完成業(yè)務需求的開發(fā)，解決復雜問題。
2. 熟悉MySQL/Oracle等數據庫的增刪改查操作，了解索引等基礎優(yōu)化方法。
3. 熟悉基礎調度工具(如Airflow/DolphinScheduler)的任務配置與監(jiān)控。
4. 具備良好的數據敏感性和業(yè)務理解能力。
工作地點
番禺區(qū)廣州番禺節(jié)能科技園順德美的總部
相似職位
- 大數據開發(fā)工程師（實時）1.8-2.5萬
廣州 - 海珠
成都山康技術服務有限公司 - 大數據開發(fā)工程師（名創(chuàng)）1.3-1.9萬
廣州 - 海珠
深圳中科軟科技信息系統(tǒng)有限公司 - 數據研發(fā)工程師1-2萬
廣州 - 番禺
樂味餐飲集團有限公司 - 大數據平臺開發(fā)工程師 (MJ000431)1.5-3萬·13薪
廣州 - 天河
卓望信息技術(北京)有限公司 - 大數據開發(fā)工程師6000-8000元
廣州 - 海珠
廣州廣杰網絡科技有限公司 - 大數據開發(fā)實習生100-200元/天
廣州 - 天河
亞信科技(中國)有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
吳女士/招聘總監(jiān)
昨日活躍立即溝通
深圳華云信息系統(tǒng)科技股份有限公司【公司概況】深圳華云信息系統(tǒng)有限公司成立于2007年5月，坐落在中國廣東省深圳市南山區(qū)高新科技園國家創(chuàng)新創(chuàng)業(yè)中心國家工程實驗室大樓,是國內金融科技領域領先的IT系統(tǒng)建設及提供全套解決方案的高科技企業(yè)，公司業(yè)務覆蓋基于FPGA的極速交易產品、AI+大數據相關解決方案、 IT基礎設施建設與服務等領域。華云信息擁有專業(yè)的軟件產品設計和研發(fā)團隊、優(yōu)秀的市場銷售團隊、高效的業(yè)務交付團隊，同時通過十多年的辛苦耕耘，積累了豐富的客戶資源。華云信息專注于開發(fā)具有自主核心技術、知識產權的軟件產品，致力于為客戶構建從IT基礎規(guī)劃到方案落地再到業(yè)務創(chuàng)新的完整的價值鏈，幫助客戶實施、管理和完善企業(yè)的信息系統(tǒng)，提供端到端的服務。面向未來，華云信息繼續(xù)秉承“您所需，我所為”的服務理念，通過專業(yè)化的IT服務，推動技術向價值的轉化，加快客戶自身的變革轉型，以己所長為我們的客戶提升價值貢獻一份力量。
公司主頁