崗位職責：
1、負責 AgentOps 平臺 設計與實現(xiàn)，覆蓋：
- Observability：端到端 trace（prompt/工具調用/檢索）、日志、指標（延遲/成本/token/錯誤率/命中率）
- Evaluation：離線評測集、自動化評測流水線、回歸門禁、線上 A/B 與灰度策略
- Optimization：提示/參數(shù)管理、模型路由與回退、緩存策略、批處理與并發(fā)控制、成本-質量權衡策略
2、建設 實驗與發(fā)布體系：Prompt/策略/模型版本化，配置中心，特性開關（feature flag），一鍵回滾與對比分析。
3、負責 運行時與基礎設施：部署（容器/K8s 或等價平臺）、CI/CD、環(huán)境隔離、多租戶配額與限流、密鑰管理、審計與合規(guī)基礎能力。
4、打通數(shù)據(jù)閉環(huán)：采集線上失敗案例與用戶反饋，形成可復現(xiàn)樣本；聯(lián)動應用與檢索同學做歸因（檢索差/模型差/工具差/權限差）與持續(xù)優(yōu)化。
5、對平臺的穩(wěn)定性與可用性負責：SLO/告警、容量規(guī)劃、壓測、故障演練與應急響應。
任職要求：
1、本科及以上，計算機/相關專業(yè)優(yōu)先；5 年以上平臺/后端/Infra 經驗，具備復雜系統(tǒng)的設計與落地能力。
2、熟悉可觀測體系與工程實踐：OpenTelemetry/Tracing、結構化日志、指標與告警；能設計“面向 LLM/Agent 的可觀測數(shù)據(jù)模型”（span、事件、標簽與采樣策略）。
3、有評測/實驗工程經驗：離線評測框架、數(shù)據(jù)集與版本管理、LLM judge/rule-based 組合、回歸門禁、A/B 實驗設計與統(tǒng)計意識。
4、熟悉現(xiàn)代交付與部署體系：CI/CD、容器、K8s（或等價）、配置中心、灰度發(fā)布、回滾；理解多租戶、限流、配額與成本控制。
5、具備性能與穩(wěn)定性經驗：緩存、并發(fā)、隊列、熔斷降級、重試冪等、壓測與容量規(guī)劃。
6、加分項：
- 有 LLM 網關/模型路由（多供應商、多模型）、token 成本治理經驗。
- 有安全與合規(guī)經驗（審計、權限、數(shù)據(jù)脫敏、密鑰/證書管理）。
- 有內部平臺產品化經驗（讓業(yè)務團隊自助接入、自助評測、自助發(fā)布）。