崗位職責(zé):
1、AI模型質(zhì)量保障
設(shè)計(jì)并執(zhí)行針對(duì)機(jī)器學(xué)習(xí)/深度學(xué)習(xí)模型的測(cè)試方案,覆蓋模型準(zhǔn)確性、魯棒性、泛化能力及公平性驗(yàn)證
開(kāi)發(fā)自動(dòng)化測(cè)試工具鏈,實(shí)現(xiàn)模型訓(xùn)練、推理環(huán)節(jié)的持續(xù)集成/持續(xù)測(cè)試(CI/CT)
2、數(shù)據(jù)質(zhì)量管理
構(gòu)建數(shù)據(jù)質(zhì)量評(píng)估體系,檢測(cè)訓(xùn)練/測(cè)試數(shù)據(jù)的分布偏移、標(biāo)注錯(cuò)誤及偏差問(wèn)題
設(shè)計(jì)數(shù)據(jù)增強(qiáng)策略測(cè)試方案,評(píng)估增強(qiáng)策略對(duì)模型性能的影響
3、系統(tǒng)級(jí)測(cè)試開(kāi)發(fā)
搭建AI服務(wù)壓力測(cè)試框架,驗(yàn)證高并發(fā)場(chǎng)景下的模型推理性能與資源消耗
設(shè)計(jì)端到端測(cè)試場(chǎng)景,驗(yàn)證AI系統(tǒng)與業(yè)務(wù)邏輯的集成表現(xiàn)
4、前沿技術(shù)研究
跟蹤AI測(cè)試領(lǐng)域新技術(shù)(如對(duì)抗樣本檢測(cè)、模型可解釋性驗(yàn)證),推動(dòng)測(cè)試方法升級(jí)
建立AI系統(tǒng)風(fēng)險(xiǎn)評(píng)估體系,制定模型迭代的準(zhǔn)出標(biāo)準(zhǔn)
任職要求:
1、硬性條件:
計(jì)算機(jī)/數(shù)學(xué)/統(tǒng)計(jì)學(xué)本科以上學(xué)歷,3年以上AI相關(guān)測(cè)試經(jīng)驗(yàn)
精通Python,掌握Pytest/Unittest框架,具備TensorFlow/PyTorch模型調(diào)試經(jīng)驗(yàn)
深入理解機(jī)器學(xué)習(xí)原理,熟悉常見(jiàn)模型評(píng)估指標(biāo)(如AUC、F1-score、混淆矩陣)
熟練使用Prometheus+Grafana監(jiān)控體系,有MLOps工具鏈(MLflow/Kubeflow)實(shí)戰(zhàn)經(jīng)驗(yàn)
2、高階能力:
具備對(duì)抗樣本生成(Foolbox/ART)或模型可視化(Captum/TF-explain)項(xiàng)目經(jīng)驗(yàn)
熟悉模型壓縮技術(shù)(量化/剪枝)的測(cè)試驗(yàn)證方法
有云原生AI服務(wù)測(cè)試經(jīng)驗(yàn)(AWS SageMaker/Azure ML)
3、素質(zhì)要求:
具備測(cè)試左移思維,能在需求階段識(shí)別AI系統(tǒng)潛在風(fēng)險(xiǎn)
擅長(zhǎng)通過(guò)A/B測(cè)試設(shè)計(jì)進(jìn)行多模型版本效果對(duì)比
持有ISTQB高級(jí)認(rèn)證或云平臺(tái)AI專項(xiàng)認(rèn)證優(yōu)先