崗位職責(zé):
1.負(fù)責(zé)多模態(tài)大模型VLM/VLA在人形機(jī)器人中的算法設(shè)計(jì)、開發(fā)與真機(jī)部署，構(gòu)建大規(guī)模多模態(tài)數(shù)據(jù)集(視覺(jué)、語(yǔ)言、運(yùn)動(dòng)序列等)，將VLM/VLA應(yīng)用于人形機(jī)器人的操作、移動(dòng)和人機(jī)交互等任務(wù);
2.基于ROS/ROS2、IsaacSim等搭建仿真環(huán)境，開發(fā)real2sim2real遷移框架，加速算法在真實(shí)機(jī)器人平臺(tái)的部署。3.跟蹤具身智能、機(jī)器人模仿化學(xué)習(xí)等領(lǐng)域進(jìn)展，探索多模態(tài)大模型與機(jī)器人控制的深度結(jié)合路徑。
崗位要求:
1.計(jì)算機(jī)、人工智能、自動(dòng)化等相關(guān)專業(yè)，碩士及以上學(xué)歷優(yōu)先;
2.具備扎實(shí)的機(jī)器人學(xué)基礎(chǔ)，熟悉機(jī)器人運(yùn)動(dòng)學(xué)/動(dòng)力學(xué)建模、阻抗控制、參數(shù)辨識(shí)等算法，有機(jī)械臂或人形機(jī)器人開發(fā)經(jīng)驗(yàn)優(yōu)先;
3.具備扎實(shí)的深度學(xué)習(xí)基礎(chǔ)，熟悉Transformer、BERT、ViT、CLIP、BLIP等主流視覺(jué)-語(yǔ)言模型架構(gòu);
4.有大模型訓(xùn)練/推理優(yōu)化經(jīng)驗(yàn)，熟悉其在多模態(tài)任務(wù)中的應(yīng)用，熟悉主流VLA/VLM模型架構(gòu)，具備完整的算法復(fù)現(xiàn)、模型開發(fā)、訓(xùn)練優(yōu)化及真機(jī)部署全流程經(jīng)驗(yàn);
5.熟練使用PyTorch、TensorFlow等深度學(xué)習(xí)框架，具備良好的工程能力和代碼實(shí)現(xiàn)能力;
6.良好的團(tuán)隊(duì)協(xié)作與溝通能力，具備快速學(xué)習(xí)和解決問(wèn)題的能力。