職位描述
C++Python深度學(xué)習(xí)算法視覺圖像算法
崗位職責(zé):
1、參與自動(dòng)駕駛端到端大模型的研發(fā)與優(yōu)化,覆蓋“一段式端到端”與“兩段式端到端”兩條技術(shù)路線,工作內(nèi)容包括但不限于:
(1)一段式端到端(One-Stage E2E):從多傳感器輸入(相機(jī)/激光雷達(dá)/車輛狀態(tài)等)直接學(xué)習(xí)輸出駕駛行為/軌跡/控制量或等價(jià)表示,負(fù)責(zé)模型結(jié)構(gòu)設(shè)計(jì)、訓(xùn)練策略、時(shí)序建模與穩(wěn)定性優(yōu)化;
(2)兩段式端到端(Two-Stage E2E):構(gòu)建“感知/世界表征(如BEV/Occ/拓?fù)洌鷽Q策/規(guī)劃/控制”的端到端鏈路,負(fù)責(zé)中間表征的定義、任務(wù)頭設(shè)計(jì)(3D檢測(cè)/BEV Lane/Occ等)、以及決策模塊的聯(lián)訓(xùn)/蒸餾/對(duì)齊;
(3)訓(xùn)練與數(shù)據(jù):負(fù)責(zé)訓(xùn)練數(shù)據(jù)構(gòu)建(真實(shí)+仿真)、樣本挖掘、長(zhǎng)尾增強(qiáng)、訓(xùn)練調(diào)參、效果分析與問題定位,形成可迭代的數(shù)據(jù)驅(qū)動(dòng)機(jī)制;
(4)工程化落地:推進(jìn)模型壓縮(剪枝/蒸餾/量化)與推理加速(TensorRT/FP16/INT8等),適配車端算力(Jetson Orin等),保障實(shí)時(shí)性、穩(wěn)定性與可回滾上線;
(5)系統(tǒng)協(xié)同:與感知、預(yù)測(cè)、規(guī)劃控制、仿真、數(shù)據(jù)平臺(tái)協(xié)同,推動(dòng)端到端模型在自動(dòng)駕駛系統(tǒng)中的聯(lián)調(diào)、上線與持續(xù)迭代;
2、根據(jù)項(xiàng)目分工承擔(dān)模型訓(xùn)練、算法設(shè)計(jì)、系統(tǒng)實(shí)現(xiàn)、性能優(yōu)化、部署上線等工作,推動(dòng)端到端模型從原型驗(yàn)證到規(guī)模化落地;
3、跟蹤端到端自動(dòng)駕駛、世界模型、生成式建模等前沿研究,結(jié)合業(yè)務(wù)場(chǎng)景開展技術(shù)預(yù)研與工程驗(yàn)證。
任職資格:
1、碩士及以上學(xué)歷(博士?jī)?yōu)先),計(jì)算機(jī)/人工智能/自動(dòng)駕駛/機(jī)器人等相關(guān)專業(yè);
2、熟練PyTorch與Transformer體系,具備扎實(shí)的訓(xùn)練調(diào)參與debug能力,能獨(dú)立完成模型研發(fā)與實(shí)驗(yàn)閉環(huán);
3、具備以下方向中至少兩項(xiàng)經(jīng)驗(yàn)(包括但不限于):
(1)VLA/VLM/LLM:多模態(tài)對(duì)齊、指令微調(diào)、偏好對(duì)齊、推理評(píng)測(cè)體系;
(2)自動(dòng)駕駛場(chǎng)景理解:交通參與者交互、風(fēng)險(xiǎn)評(píng)估、交規(guī)語義/策略約束;
(3)軌跡/行為建模:動(dòng)作生成、行為克隆BC、強(qiáng)化學(xué)習(xí)RL或相關(guān)策略學(xué)習(xí);
(4)端側(cè)部署優(yōu)化:TensorRT、量化/蒸餾、profiling與吞吐/延遲優(yōu)化(Orin優(yōu)先);
4、熟練Python、C++,具備良好工程化能力與代碼規(guī)范意識(shí);
5、具備較強(qiáng)的系統(tǒng)分析與溝通協(xié)作能力,能跨團(tuán)隊(duì)推進(jìn)模型、數(shù)據(jù)、平臺(tái)與車端聯(lián)調(diào)上線。