定位:數(shù)據處理 + DevOps + 數(shù)據庫
工作地點: 深圳 / 杭州(可遠程友好)
---
核心職責
1. 數(shù)據處理
- 架構 Kafka / RocketMQ-> S3 / Parquet 埋點管道:秒級增量聚合并寫 Redis / Feature Store / ClickHouse / StarRocks;
- 設計與維護統(tǒng)一的監(jiān)控埋點規(guī)范及數(shù)據的處理;保證數(shù)據的可用性、完整性;將數(shù)據聚合、匿名化導出;
- 性能優(yōu)化:合理索引、分區(qū)、緩存(Redis);高效 ETL(Airflow / dbt / DuckDB)。
2. 云服務 & DevOps
- 使用 GitHub Actions、Docker 實現(xiàn)CI/CD自動化部署;搭建和管理云資源,保障環(huán)境“一鍵復現(xiàn)”;
- 部署統(tǒng)一監(jiān)控與告警:可觀測平臺,監(jiān)控系統(tǒng),錯誤跟蹤,審計日志等確保系統(tǒng)的平穩(wěn)運作和故障及時響應。
3. 數(shù)據庫與服務端開發(fā)
- 維護與迭代 PostgreSQL,MongoDB等數(shù)據庫索引、分區(qū)、分片與性能調優(yōu);
- 基于 Python 開發(fā)高質量 API;接入與集成其它服務端端口,確保穩(wěn)定、高效的響應;
- 監(jiān)控,編寫并維護自動化單元測試(pytest)與 API 集成測試,保證代碼基礎質量;
---
任職要求
- 教育 & 背景
- 計算機/軟件工程或相關專業(yè)本科及以上學歷;3–6 年數(shù)據平臺數(shù)據流處理經驗。
- 項目經驗
- 掌握Kafka,F(xiàn)link,S3 / Parquet,Redis / Feature Store / ClickHouse / StarRocks等流式數(shù)據的處理;
- 熟悉 DevOps / SRE、CI / CD、Docker、云監(jiān)控 / 告警構架以及部署;
- 了解 PostgreSQL,MongoDB等數(shù)據庫高級特性,有數(shù)據庫調優(yōu)實戰(zhàn)經歷優(yōu)先;
- 學習能力
- 自驅主動,結果導向;熱愛嘗試新工具、新技術;樂于分享;
- 能主動吸收最新的數(shù)據處理和互聯(lián)網平臺技術實踐(如 Supabase Edge、向量搜索等)。
- 協(xié)作溝通及其它
- 能清晰闡述技術方案,積極推動跨職能溝通;能在有限資源下抗壓并提供務實、有效的方案。
- 扎實的互聯(lián)網行業(yè)技術的功底和理解;高質量代碼以及復用;注重代碼與文檔質量。
---
加分項
- 使用過 Flink SQL、ClickHouse/StarRocks、Feast、向量數(shù)據庫(Milvus / Qdrant / pgvector);
- 保障高可用、部署基礎監(jiān)控和告警 (Grafana Cloud, Sentry),確保出現(xiàn)故障及時響應;
- 能獨立做中等復雜度 UI;可支持輕量級前端開發(fā);用 AI 輔助開發(fā)生成腳手架、K8s Manifest、單測等;
- 了解Amplitude / Snowplow 埋點;熟悉 Supabase/Firebase 等 BaaS 平臺;
- 可用 AI 維護 Retool / Supabase Studio 搭建低代碼管理平臺,滿足運營基礎需求;
- 有大型流量服務的擴容、容災經驗;部署單節(jié)點 ClickHouse + Superset;逐步遷移 BI 報表。
---
- 成長路徑:數(shù)據架構師 / 全棧工程師 / Tech Lead / 帶領隊伍橫向發(fā)展;公司支持參與相關技術大會、培訓。