職位描述
崗位職責:1、參與多模態(tài)大模型在機器人操作、移動及全身控制等領(lǐng)域的創(chuàng)新研究,推動大模型在具身智能場景中的應(yīng)用;2、數(shù)據(jù)Real2Sim2Real:優(yōu)化端到端數(shù)據(jù)采集管線,處理多模態(tài)數(shù)據(jù)(RGB-D、文本、觸覺等),提升數(shù)據(jù)質(zhì)量和多樣性,為大模型提供高質(zhì)量訓(xùn)練數(shù)據(jù);3、模型優(yōu)化:負責大模型的調(diào)優(yōu)和測試,探索強化學(xué)習、模仿學(xué)習、視覺語言操作(VLA)等方法,提升機器人智能體的感知與決策能力;4、模型部署:將算法部署到自研機器人平臺,優(yōu)化推理速度和實時性,提高可部署性和落地能力。任職要求:1、 學(xué)術(shù)背景:碩士以上,計算機、人工智能、機器人、自動化等相關(guān)專業(yè);2、 對模仿學(xué)習(包括但不限于ACT、Diffusion Policy等)、VLA(OpenVLA、Pi0)等技術(shù)方向有較深入的了解和實踐經(jīng)驗;熟悉當前主流開源機器人數(shù)據(jù)集。對當前開源/閉源大模型的調(diào)用以及部署有較深入的了解和使用經(jīng)驗;3、編程能力:良好的Python/C++/CUDA編程能力,熟練使用PyTorch,具備深度學(xué)習模型訓(xùn)練及優(yōu)化經(jīng)驗;4、 仿真平臺經(jīng)驗:具備MuJoCo、ManiSkill、Isaac Gym、Genesis等仿真環(huán)境的使用經(jīng)驗,能夠進行高效的仿真訓(xùn)練與數(shù)據(jù)生成。熟悉剛體運動學(xué),機器人運動學(xué)、動力學(xué);5、 技術(shù)文獻與團隊協(xié)作:具備英文讀寫能力,能夠閱讀前沿論文,撰寫學(xué)術(shù)文章,善于團隊協(xié)作。
企業(yè)介紹
跨維(深圳)智能數(shù)字科技有限公司成立于 2021 年 6 月,是一家以 Sim2Real 為核心,研發(fā)高通用性具身智能技術(shù)的國家高新技術(shù)企業(yè)。公司憑借在 3D 生成式 AI、多模態(tài)大模型及三維成像方面的長期技術(shù)積累,打造了軟硬一體的產(chǎn)品矩陣,包含 DexVerse? 具身智能引擎、基于 3D VLA (3D Vision Language ****) 大模型的成像感知套件等產(chǎn)品,是具身智能核心技術(shù)規(guī)模化商業(yè)落地的先驅(qū)者,目前已在30+行業(yè)批量商業(yè)落地。 目前公司已獲得來自松禾資本、真格基金、聯(lián)創(chuàng)資本、聯(lián)想創(chuàng)投等投資。 公司現(xiàn)有約百人團隊,公司研發(fā)人員占比 70% 以上,核心算法團隊由三維人工智能領(lǐng)域權(quán)威專家領(lǐng)銜,核心成員具有新加坡國立大學(xué)、清華大學(xué)、南洋理工大學(xué)、西安交通大學(xué)、華南理工大學(xué)等國內(nèi)外頂尖高校人工智能博士/碩士背景;硬件及產(chǎn)品化團隊來自飛利浦、ASML、騰訊、霍尼韋爾等知名科技企業(yè),具有豐富的智能制造產(chǎn)品開發(fā)與落地經(jīng)驗,技術(shù)實力雄厚。創(chuàng)新 3D AffordanceNet 三維功能可供性分析方法及大規(guī)模基準數(shù)據(jù)集;多次獲國際相關(guān)大賽 / 排行榜冠軍,技術(shù)顛覆性創(chuàng)新。